HPC集群第3页

缺少关键的 MapReduce 框架文件

计算圆周率时提醒Hadoop集群缺少关键的MapReduce框架文件mr-framework.tar.gz在http://master:7180/cmf/services/4/status里直接安装再次运行代码

·2025-07-06 20:30

Kafka “假死“现象深度解析与解决方案

Kafka假死（也称为"僵死"或"挂起"）是指Kafka集群或Broker在表面上进程仍在运行，但实际上已经停止响应或处理能力极度下降的状态。

·2025-07-06 18:37

apache-dolphinscheduler-3.2.0调度器简介和集群部署详细安装文档

1、为什么选用apache-dolphinscheduler轻松管理复杂的任务工程支持跨项目和跨工作流程的任务依赖支持Kill、暂停和恢复操作任务支持以租户、Worker分组组和环境中隔离运行每个任务都可以修改输出参数，并将其传递给后续任务在一分钟内创建你的工作流程通过拖拉拽的工作流创建方式提高效率支持Python、Yaml和OpenApi的方式生成工作流支持将一个工作流作为另一个工作流的子流程执

·2025-07-06 17:31

部署greenplum7.2双节点集群

1.环境：1.一台keylin10的服务器，部署两个docker容器，实现双节点集群部署；2.创建Docker网络为Greenplum容器创建一个自定义的Docker网络，这样可以方便地进行容器间的通信

·2025-07-06 17:00

【大数据入门核心技术-DolphinScheduler】（二）DolphinScheduler安装部署-集群模式

目录一、部署模式1、单机模式2、伪集群模式3、集群模式二、部署安装1、下载2、创建mysql元数据库3、配置一键部署脚本4、初始化数据库5、一键部署DolphinScheduler6、访问DolphinSchedulerUI

forest_long·2025-07-06 17:27

云原生Kubernetes系列 | etcd3.5集群部署和使用

云原生Kubernetes系列|etcd3.5集群部署和使用1.etcd集群部署2.etcd集群操作3.新增etcd集群节点1.etcd集群部署 etcd3.5官网站点： https://etcd.io

降世神童·2025-07-06 15:47

【1.5 漫画TiDB分布式数据库】

目录TiDB核心架构分布式事务原理SQL兼容性集群部署管理性能优化Java集成实战最佳实践️TiDB核心架构三层架构设计┌─

·2025-07-06 13:02

初试牛刀 - 使用 Chaos Mesh 进行第一次混沌实验

初试牛刀-使用ChaosMesh进行第一次混沌实验第一步：准备实验环境我们的“混沌实验室”需要三个核心组件：一个Kubernetes集群、ChaosMesh平台、以及一个用来做实验的应用。

weixin_42587823·2025-07-06 13:30

CentOS 系统的高可用性配置

CentOS系统的高可用性配置关键词：CentOS、高可用性、集群、故障转移、负载均衡、Pacemaker、Corosync摘要：本文详细介绍了如何在CentOS系统上配置高可用性环境。

操作系统内核探秘·2025-07-06 12:55

Python 领域 Conda 的集群环境部署经验

Python领域Conda的集群环境部署经验关键词：Conda、Python环境管理、集群部署、环境复制、依赖管理、虚拟环境、Anaconda摘要：本文深入探讨了在集群环境中使用Conda进行Python

·2025-07-06 12:17

2025年Java后端岗互联网大厂技术场景题的总结（附100w字面试题）

热点数据隔离：独立Redis集群存储秒杀商品数据。2.分布式事务一致性问题：跨服务下单如何保证数据一致性？方

小凡敲代码·2025-07-06 11:40

安装Hadoop集群&入门&源码编译

安装Hadoop集群完全分布式先决条件准备三台机器NameStaticIPDESCbigdata102192.168.1.102DataNode、NodeManager、NameNodebigdata103192.168.1.103DataNode

只年·2025-07-06 11:05

Hadoop之HDFS

Hadoop之HDFSHDFS的Shell操作启动Hadoop集群（方便后续测试）[atguigu@hadoop102~]$sbin/start-dfs.sh[atguigu@hadoop102~]$sbin

只年·2025-07-06 10:02

Redhat 9.5 Offline Install Rke2 v1.33.2

添加hosts解析6.2文件描述符限制6.3关闭swap6.4安装软件包6.5加载模块6.6设置内核参数7.部署dns8.配置VIP高可用8.1安装nginx8.2安装keepalived9.RKE2集群部署

·2025-07-06 09:26

多云迷宫突围：Karmada+ClusterAPI统一治理三大云

通过ClusterAPI实现跨云集群生命周期自动化（创建/销毁/升级），结合Karmada的应用跨云分发能力，解决“一套配置适

Star_Sea_77·2025-07-06 09:52

25年最新Java后端社招场景项目题总结！（附100w字面试题）

技术方案：Redis预减库存+异步扣减（Kafka/RocketMQ）分布式锁（Redisson）或乐观锁（CAS）限流策略（Nginx/Sentinel）扩展：热点数据隔离（独立Redis集群）、风控防刷

小凡敲代码·2025-07-06 08:13

【宝塔Linux面板】在阿里云服务器安装

宝塔Linux面板是提升运维效率的服务器管理软件，支持一键LAMP/LNMP/集群/监控/网站/FTP/数据库/JAVA等100多项服务器管理功能。

孤独本就常态·2025-07-06 07:09

rook-ceph配置dashboard代理无法访问

ceph-tools的pod中看看dashboard是否开启kubectl-nrook-cephexec-itrook-ceph-tools-7b75b967db-jn68d–bashcephmgrservices查看集群内地址使用

·2025-07-06 05:29

Redisson实现的分布式锁核心原理

Redisson实现的分布式锁核心原理是利用Redis的原子操作、数据结构和发布订阅机制，在单节点或集群环境下提供互斥、可重入、自动续期（看门狗）、公平锁等特性。

俏布斯·2025-07-05 22:12

使用reactor-rabbitmq库监听Rabbitmq

文章目录ReactorRabbitMQ简介ReactorRabbitMQ核心特性使用方法添加依赖创建连接发送消息接收消息高级配置消息确认模式错误处理集群监听（自动ACK）集群监听手动ACK性能优化建议适用场景

后会无期77·2025-07-05 22:40

Flink MongoDB CDC 环境配置与验证

一、MongoDB数据库核心配置1.环境准备与集群要求MongoDBCDC依赖ChangeStreams特性，需满足以下条件：版本要求：MongoDB≥3.6集群模式：副本集（ReplicaSet）或分片集群

Edingbrugh.南空·2025-07-05 19:50

K8S初始化master节点不成功kubelet.service failed(cgroup driver配置问题)

一、背景安装k8s集群，初始化master节点一直不成功。

一掬净土·2025-07-05 19:17

Kubernetes 资源调度中标签（Label）和选择器（Selector）深入理解

它们帮助我们组织、分类和选择集群中的资源对象。通过标签和选择器，Kubernetes可以轻松地管理和调度Pods、服务（Services）以及其他资源对象。本文将深入探讨Kube

pengdott·2025-07-05 15:55

Flink TiDB CDC 环境配置与验证

一、TiDB数据库核心配置1.启用TiCDC服务确保TiDB集群已部署TiCDC组件（版本需兼容FlinkCDC3.0.1），并启动同步服务：#示例：启动TiCDC捕获changefeedcdcclichangefeedcreate

·2025-07-05 14:20

在Amazon EKS中应用Amazon Fargate的Serverless容器化实践

本文深度解析如何通过Fargate实现EKS集群的Serverless节点管理，大幅降低K8s运维复杂度一、为什么选择Fargate+EKS？

AWS官方合作商·2025-07-05 13:38

spark处理kafka的用户行为数据写入hive

这份指南面向单机安装（伪集群模式），如果需要搭建真正的多节点集群，各节点间的网络互访、SSH免密登录以及配置同步需进一步调整。

月光一族吖·2025-07-05 12:33

容器与 Kubernetes 基本概念与架构

文章目录1.典型环境层次结构2.Kubernetes生态三大类2.1核心组件2.2集群管理工具2.3生态辅助工具2.4资源管理关系3.Docker容器技术与实践3.1镜像拉取加速3.2认证与登录3.3常用命令

木鱼时刻·2025-07-05 11:53

Oracle 10G RAC在AIX上的集群部署与管理

本文还有配套的精品资源，点击获取简介：Oracle10GRAC集群利用GlobalCacheService和ClusterInterconnect提供高可用性和可扩展性，支持在多个服务器间共享数据库资源

Compass宁·2025-07-05 03:33

RabbitMQ 高可用集群设计与消息幂等性实战指南

RabbitMQ高可用集群设计与消息幂等性实战指南在电商秒杀、支付、库存同步等高并发业务场景中，消息中间件既要保证高可靠、高可用，又要防止重复消息对业务造成副作用。

浅沫云归·2025-07-04 22:04

Redis哨兵模式

Redis哨兵模式文章原始同步：微信搜索公众号：SkyWide无限领航QQ技术群：308191819欢迎各位加入Redis哨兵模式（1）一主二从Redis集群部署使用SSH工具连接三个虚拟机节点修改主机名

SkyWide 无限领航·2025-07-04 18:36

电子电气诊断架构 --- HPC车载诊断

我是穿拖鞋的汉子，魔都中坚持长期主义的汽车电子工程师。老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：做到欲望极简，了解自己的真实欲望，不受外在潮流的影响，不盲从，不跟风。把自己的精力全部用在自己。一是去掉多余，凡事找规律，基础是诚信；二是系统思考、大胆设计、小心求证；三是“一张纸制度”，也就是无论多么复杂的工作内容，要在一张纸上描述清楚；四是要坚决反对虎头蛇尾，反对繁文缛节，反对老

汽车电子实验室·2025-07-04 16:49

Redisson使用示例

host:10.192.33.144port:6379#port:20051#password:123456password:''#database:1database:0ssl:false##redis集群环境配置

·2025-07-04 15:08

Linux集群管理实战：5个必知的核心技术与工具

Linux集群管理实战：5个必知的核心技术与工具关键词：Linux集群、负载均衡、高可用性、分布式计算、集群监控、自动化部署、资源调度摘要：本文将深入探讨Linux集群管理的5个核心技术领域，包括负载均衡

操作系统内核探秘·2025-07-04 14:35

大数据基础知识-Hadoop、HBase、Hive一篇搞定

它通过利用集群的力量，提供高速运算和存储能力，特别适合处理超大数据集的应用程序。Hadoop生态圈Hadoop生态圈是一个由多个基于Hadoop开发的相

原来是猪猪呀·2025-07-04 13:28

大数据(1)-hdfs&hbase

hbase&hdfs一、体系结构HDFS是一个标准的主从(Master/Slave)体系结构的分布式系统；HDFS集群包含一个或多个NameNode(NameNodeHA会有多个NameNode)和多个

viperrrrrrr·2025-07-04 13:26

跟rocktmq杠上了

不应该啊，但是java应用也没有重新部署，除了这个变动没有其他原因了，后来运维又一波操作，但是还是注册不上，最终没办法还是找了阿里云客服，原来是因为旧的集群还在连着，但

樱桃的程序员麻麻·2025-07-04 08:53

分布式定时任务：Elastic-Job-Lite

一、基础（一）核心特性分布式协调通过ZooKeeper实现作业的分布式调度和协调，确保任务在集群环境中不重复、不遗漏地执行。分片机制支持将任务拆分为多个分片（Sharding）并行执行

·2025-07-04 06:08

Spark从入门到熟悉（篇二）

部分内容：创建RDD常用Action操作常用Transformation操作针对PairRDD的常用操作缓存操作共享变量分区操作编程实战创建RDD实现方式有如下两种方式实现：textFile加载本地或者集群文件系统中的数据用

·2025-07-04 05:32

K8S之Pod资源调度

亲和性（PodAffinity）Pod反亲和性（PodAnti-Affinity）Pod资源调度总览APIServer在接受客户端提交Pod对象创建请求后，然后是通过调度器（kube-schedule）从集群中选

·2025-07-04 04:27

使用 Docker Swarm 部署高可用集群指南

DockerSwarm是Docker原生的集群管理工具，可以轻松地将多个Docker主机组成一个集群，实现服务的高可用性和负载均衡。

思静鱼·2025-07-04 03:19

为什么选择YashanDB作为您的数据存储解决方案？

领先的体系架构YashanDB的体系架构灵活且高效，支持单机部署、共享集群部署以及分布式集群部署

·2025-07-04 03:18

企业如何使用YashanDB实现数据资产最大化？

YashanDB的部署架构与灵活应用YashanDB支持三种部署形态：单机部署、分布式集群部署及共享集群部署

·2025-07-04 03:48

企业如何根据业务需求调整YashanDB数据库配置

部署架构选择YashanDB支持多种部署形态，包括单机（主备）部署、分布式集群部署和共享集群部署。根据企业的具体需求，可以选择不同的部署架构。单机部署适用

·2025-07-04 03:17

分区表设计：历史数据归档与查询加速

双重优化机制‌：‌集群级‌：通过DISTRIBUTEBY分布数据到不同节点，实现负载均衡；‌节点级‌：通过PARTITIONBY在节点内细分数据，减

·2025-07-04 01:09

PCIe Crosslink

这种技术主要用于高性能计算（HPC）、FPGA加速、GPU直连等场景，以降低延迟并提高带宽利用率。1.PCIeCrossl

zly8865372·2025-07-04 00:31

NUMA 架构科普：双路 CPU 系统是如何构建的？

NUMA（Non-UniformMemoryAccess，非一致性内存访问）是一种用于多处理器系统的内存架构设计，主要应用于服务器、工作站和高性能计算（HPC）领域。

·2025-07-04 00:00

为什么YashanDB数据库是大数据处理的理想选择？

高度可扩展的部署架构YashanDB支持多种部署形态，包括单机部署、分布式集群

·2025-07-03 23:45

企业如何选择合适的YashanDB数据库部署策略

YashanDB作为一款高性能数据库，提供了多种部署选项，如单机部署、分布式集群部署和共享集群部署。本文将深入分析这些部署策略的技术原理及其适用场景，帮助企业根据自身需求选择最合适的YashanDB

·2025-07-03 23:12

企业如何利用YashanDB提升系统稳定性

核心技术点高可用性架构YashanDB支持多种部署模式，如单机主备部署、分布式集群部署以