CDH集群

分布式协调服务 ZooKeeper 深度解析与实战指南

一、ZooKeeper概述ZooKeeper是Apache开源的分布式协调服务，旨在为分布式系统提供高可靠的配置管理、分布式同步、集群管理等功能。
线条1·2025-05-24 08:02

Flink概述

Flink的核心是一个分布式流数据流引擎，能够在集群上运行，支持多种数据源和数据接收器。Flink的主要特点Flink提供了强大的流处理能力，支持事件时间处理、状态管理、窗口操作等。
多多洛码代码·2025-05-24 08:29

一文看懂ingress nginx实现灰度发布和蓝绿发布过程

本文将介绍在K8S集群中如何通过NginxIngr
小杨同学THY·2025-05-24 07:25

FluxCD入门操作文档

**1.6什么是**Kustomization****与kustomize工具的区别**1.7什么是**Bootstrap（引导）**1.8安装FluxCLI1.9配置fluxbash补全1.10检查集群是
小杨同学THY·2025-05-24 07:55

rabbitmq 单机部署以及集群部署（多机单节点，单机多节点）

在win下cmd（Windows向centos7（lunix）发送文件）：sftp用户名@ip；cd和pwd是centos7操作打开文件lcd，lpwd是windows操作打开文件通过put文件名地址centos7下文件夹名（put后加上-r发送整个文件夹）Centos7：给用户或用户组分配文件夹权限:1.将/opt目录的所有者更改为username:sudochownusername/opt2.
a_12321321·2025-05-24 07:51

Python爬虫（35）Python爬虫高阶：基于Docker集群的动态页面自动化采集系统实战

目录一、技术演进与行业痛点二、核心技术栈深度解析2.1动态渲染三件套2.2Docker集群架构设计2.3自动化调度系统三、进阶实战案例3.1电商价格监控系统1.技术指标对比2.实现细节3.2新闻聚合平台
一个天蝎座 白勺 程序猿·2025-05-24 06:45

Linux（CentOS 7）安装和配置RocketMq集群

RocketMq集群1.安装RocketMq1.解压RocketMqunziprocketmq45.zip/usr/local/rocketmq根据实际情况修改内存配置（默认值太大）vimbin/runserver.shJAVA_OPT
一颗红心丶·2025-05-24 04:58

分布式系统与集群：区别与联系

文章目录一、分布式和集群1.1分布式和集群的区别1.2分布式和集群的联系1.3总结二、细节补充2.1为什么内容分发网络CDN被归类为分布式系统而不是集群？
idealzouhu·2025-05-24 00:04

【分布式与集群】

分布式与集群文章目录分布式与集群一、分布式二、集群三、分布式与集群的关系一、分布式什么是分布式服务？
Lin_zi.·2025-05-24 00:34

分布式与集群的区别

通俗表达：分布式是把一个任务拆分为多个子任务去执行集群是把一个任务同时给多台机器去执行一、单机单机就是把做的系统部署到一台服务器上，，所有的请求业务都由这台服务器处理。
nccxyxzq·2025-05-24 00:33

使用Rancher在CentOS 环境上部署和管理多Kubernetes集群

然而，随着企业应用规模的扩大，多集群管理逐渐成为企业IT架构中的重要需求。
庸子·2025-05-23 23:26

深入探究AKS Workload Identity

AzureKubernetes服务(AKS)提供了一项名为WorkloadIdentity的强大功能，它可以增强安全性并简化在Kubernetes集群中运行的应用程序的身份验证。
云攀登者-望正茂·2025-05-23 19:01

Docker 与 Kubernetes 部署 RabbitMQ 集群（二）

四、Kubernetes部署RabbitMQ集群实战（一）Kubernetes集群准备搭建Kubernetes集群可以采用多种方式，例如使用kubeadm工具进行搭建。
计算机毕设定制辅导-无忧学长·2025-05-23 19:29

【Docker】常见概念|技术架构演进之路|八大架构|单机架构|应用数据分离架构|应用服务集群架构

目录一、常见概念应用（Application）/系统（System）模块（Module）/组件（Component）分布式（Distributed）集群（Cluster）主（Master）/从（Slave
深鱼~·2025-05-23 13:20

Hadoop系列二

写在前面生产上，集群的机器，总内存的75%，25%留给系统、Linux机制、以及防止OOM-killer。
qiyong7578·2025-05-23 12:38

深入理解 Hadoop 核心组件 Yarn：架构、配置与实战

Yarn（资源管理器）：作为Hadoop的“操作系统”，负责集群资源（内存
线条1·2025-05-23 11:36

K8s 中 /etc/resolv.conf 断链引发 connect: connection refused 错误排查记录

文章目录问题现场查因过程根因解决方案方法一：恢复/etc/resolv.conf到标准格式方法二：重新启用systemd-resolved（如需要）验证总结在一次Kubernetes单节点集群部署中，我遇到一个令人困惑的问题
中年如酒·2025-05-23 11:04

天文数据处理：基于CUDA的射电望远镜图像实时去噪算法（开源FAST望远镜数据处理代码解析）

传统CPU处理方案面临三大核心挑战：实时性瓶颈：单次观测需处理PB级数据，CPU集群处理延迟达小时级，无法满足快速射电暴（FRB）等瞬变事件的实时响应
学术猿之吻·2025-05-23 05:22

GPU集群的“碳中和”策略：从DVFS调频到液冷散热系统的能效模型

引言在超算中心年均能耗突破百万度电的背景下（典型规模的1000节点GPU集群年耗电约2.5亿度，≈CNY1.8亿元），实现能耗优化已成为各国超算中心的核心任务。
学术猿之吻·2025-05-23 05:22

Redis的哨兵与集群模式

Redis的哨兵模式RedisSentinel是Redis的一种高可用方案监控、通知、自动故障转移、服务发现假设有一个master节点和两个Slave节点，当发现有master宕机之后，只要有两个哨兵达成一致，就可以去做一个master的故障迁移，我们可以通过哨兵节点来获得我的一个master。在jedis中，是通jedissentinelpool处理jedis的哨兵。Sentinel架构的主要作
L# S@·2025-05-23 05:47

linux kafka常用命令

常用命令bin目录下sh命令介绍kafka-acls.sh：用于配置和查看Kafka集群的鉴权信息。kafka-configs.sh：用于查看和修改Kafka配置。
厄尔尼诺的夏天·2025-05-23 04:45

Elasticsearch常用命令

以下是Elasticsearch查看集群状态配置和索引完整操作流程的详细命令：一、查看集群状态与配置1.集群健康状态curl-XGET"localhost:9200/_cluster/health?
安审若无·2025-05-23 02:32

k8s-NetworkPolicy

通过使用NetworkPolicy，可以实现更细粒度的网络访问控制，增强集群的安全性。
安顾里·2025-05-23 01:59

k8s面试题-ingress

在Kubernetes中，Ingress是一种API对象，用于管理外部访问到集群内服务的HTTP和HTTPS路由。
安顾里·2025-05-23 01:58

轻松搭建 Redis 集群：Docker 实战指南 (含脚本和避坑技巧)

本文已收录在Github，关注我，紧跟本系列专栏文章，咱们下篇再续！魔都架构师|全网30W技术追随者大厂分布式系统/数据中台实战专家主导交易系统百万级流量调优&车联网平台架构AIGC应用开发先行者|区块链落地实践者以技术驱动创新，我们的征途是改变世界！实战干货：编程严选网1拉取Redis镜像$docker--versionDockerversion28.0.4,buildb8034c0$docke
·2025-05-22 21:43

深度剖析ZooKeeper

一、ZooKeeper主从集群ZooKeeper采用主从架构（Leader-Follower），通过ZAB协议（ZooKeeperAtomicBroadcast）实现数据一致
LiRuiJie·2025-05-22 17:10

别让低效仓储拖累利润 试试联核无人叉车 今天升级明天领先

而联核科技推出的自动化AGV无人叉车机器人系列，正以技术革新重塑仓储物流生态，为企业提供从单机到集群的智能化解决方案，助力企业实现“今天升级，明天领先”的跨越式发展。
2501_91948061·2025-05-22 17:08

美团三面：消息中间件实现高可用架构，你会怎么设计？

V-xin：ruyuanhadeng获得600+页原创精品文章汇总PDF目录一、背景引入二、先来思考一下消息中间件的可用性问题三、集群化部署+数据多副本冗余四、多副本同步复制强制要求五、多机器承载多副本强制要求六
石杉的架构笔记·2025-05-22 15:31

82： Zookeeper高可用集群 、 分布式消息队列Kafka 、 搭建高可用Hadoop集群、总结和答疑

TopNSDARCHITECTUREDAY05案例1：组建zookeeper集群案例2：测试集群的远程管理和高可用案例3：在node节点上搭建3台kafka案例4：准备实验环境案例5：配置namenode
河北王承志·2025-05-22 12:10

Hadoop高可用 ------ 介绍及部署搭建

NameNode高可用NameNode是HDFS的核心配置，HDFS又是Hadoop的核心组件，NameNode在Hadoop集群中至关重要namenode机器宕机，将导致集群不可用，如果namenode
受益于开源 回馈于开源·2025-05-22 12:39

Hadoop-HA高可用集群启动nameNode莫名挂掉，排错解决

Hadoop-HA高可用集群启动nameNode莫名挂掉，排错解决nameNode错误日志2025-05-2116:14:12,218INFOorg.apache.hadoop.ipc.Client:Retryingconnecttoserver
岁月的眸·2025-05-22 12:36

AWS EKS：解锁企业级Kubernetes管理的终极实践

然而，企业自建K8s集群常面临运维复杂、成本高昂、安全加固困难等痛点。
AWS官方合作商·2025-05-22 11:00

一种针对集群单车运输的模块化装置结构设计（任务书）

毕业论文（设计）任务书题目一种针对集群单车运输的模块化装置结构设计姓名专业机械设计制造及其自动化班级学号题目来源□科研项目□社会实践自拟题目□其它选题类型□理论研究□应用研究设计开发□其它选题背景及目的集群单车运输的模块化装置结构设计结合了物流运输
shejizuopin·2025-05-22 10:55

HDFS NameNode 联邦机制与高可用方案解析

HDFS将所有元数据存储在内存中，单个NameNode的内存容量直接决定了集群可管理的文件数量。当集群规模扩大到亿级文件量时，单节点
线条1·2025-05-22 07:03

MySQL高可用

数据复制（Replication）2.2故障检测与自动切换（Failover）三、主流高可用方案对比与选型3.1主从复制（Master-Slave）3.2主主复制（Master-Master）3.3多节点集群
2501_91112123·2025-05-22 07:33

【AI论文】PRIMA.CPP：在低资源日常家用集群上加速700亿参数级大型语言模型推理

虽然消费类硬件越来越强大，模型量化也在不断改进，但现有的端侧解决方案仍然需要GPU集群、大RAM/VRAM和高带宽，远远超出了普通家庭集群的处理能力。
东临碣石82·2025-05-22 04:15

Spark----SparkContext解析

SparkContext解析SparkContext是用户通往Spark集群的唯一入口，任何需要使用Spark的地方都需要先创建SparkContext，那么SparkContext做了什么？
XiaodunLP·2025-05-22 03:05

Spark 集群搭建：Standalone 模式详解

搭建一个稳定、高效的Spark集群是充分发挥其性能的关键。本文将详细讲解如何搭建SparkStandalone集群。一、环境准备硬件要求至少准备三台服务器（一台作为主节点，两台作为从节点）。
麻芝汤圆·2025-05-22 03:34

SparkContext介绍

目录1.集群管理接口2.RDD操作中枢3.任务分发引擎4.执行环境配置5.性能监控枢纽SparkContext是ApacheSpark的核心组件，其作用可概括为以下五个关键维度：1.集群管理接口作为与集群管理器
大数据知识搬运工·2025-05-22 03:03

k8s1.27版本集群部署minio分布式

需求：1.创建4个pv，一个pv一个minio-pod。使用sts动态分配pvc(根据存储类找到pv)。----持久化2.暴露minio的9001端口。（nodeport）----管理界面镜像：minio/minio:RELEASE.2023-03-20T20-16-18Z--->换国内源说明：本环境仅测试，两个minio的pod放在master节点，在master加了污点容忍，其他两个minio
Hfc.·2025-05-22 02:58

mongodb 集群shard_MongoDB分片集群部署详解

一、环境说明1、我们prod环境MongoDB的集群架构是做的分片集群的部署，但是目前我们没有分片，即所有数据都在一个分片上，后期如果数量大，需要分配，集群随时可以分片，对业务方透明2、各个角色的部署情况角色
weixin_39970369·2025-05-22 01:21

mongodb 集群shard_mongodb集群sharding模式搭建

mongos，数据库集群请求的入口，所有的请求都通过mongos进行协调，不需要在应用程序添加一个路由选择器，mongos自己就是一个请求分发中心，它负责把对应的数据请求请求转发到对应的shard服务器上
JH努力·2025-05-22 01:21

MongoDB 4.2.3 Sharded Cluster部署

1、环境本文基于MongoDB4.2.3介绍如何搭建shard集群服务，环境如下表所示：主机configsvrmongosshard1shard2shard3hdp062701727018270192702027021hdp072701727018270192702027021hdp0827017270182701927020270212
楚枫默寒·2025-05-22 01:49

【拓展技术】——AutoDL服务器训练&Pycharm使用注意点&Pycharm配置AutoDL

AutoDL服务器模型训练AutoDL是一个为研究人员、开发者和企业提供的平台，它致力于提供一个高效、可靠和易用的环境，以支持复杂的计算任务和AI模型的部署：高效的并行计算资源：AutoDL拥有强大的计算集群和高性能的计算节点
柯宝最帅·2025-05-22 00:43

mysql和redis的原子性_redis集群原理及原子性操作

原子性是数据库的事务中的特性。在数据库事务的情景下，原子性指的是：一个事务(transaction)中的所有操作，要么全部完成，要么全部不完成，不会结束在中间某个环节。对于Redis而言，命令的原子性指的是：一个操作的不可以再分，操作要么执行，要么不执行。Redis操作原子性的原因Redis的操作之所以是原子性的，是因为Redis是单线程的。由于对操作系统相关的知识不是很熟悉，从上面这句话并不能真
weixin_39600837·2025-05-21 21:27

PyTorch进阶实战指南：02分布式训练深度优化

本文深入解析PyTorch分布式训练的技术实现，从单机多卡并行到万卡集群协同，系统揭示现代深度学习规模化训练的核心机制。
灏瀚星空·2025-05-21 18:37

spark调度系统核心组件SparkContext、DAGSchedul、TaskScheduler介绍

调度系统的核心组件主要有SparkContext、DAGScheduler和TaskSchedulerSparkContext介绍1.SparkContext1、资源申请：SparkContext是Spark应用程序与集群管理器
大数据知识搬运工·2025-05-21 18:33

在hadoop中实现序列化与反序列化

由于Hadoop需要在集群节点间高效传输数据并进行分布式计算，其序列化框架不仅要支持对象的序列化与反序列化，还要满足高效、紧凑、可扩展等特殊需求。本文将深入探讨Hadoop中的序列化机制及其实现方法。
谁偷了我的炒空心菜·2025-05-21 17:28

手把手教你搭建 Hadoop Namenode 高可用集群（HA）

ZooKeeper集群：确保ZK集群稳定运行，至少3个节点避免脑裂。二、环境准备1.服务器规划节点角色软件依赖bigdata01Namenode1、JournalNode、ZooKeeperHadoo
线条1·2025-05-21 12:27

hadoop集群搭建-克隆虚拟机，安装jdk，hadoop

2.2hadoop运行环境的搭建2.2.1环境准备1）安装模板虚拟机，IP地址192.168.10.100，主机名hadoop100，内存41GB，硬盘50GB2）虚拟机配置首先测试虚拟机是否可以正常上网，测试方法pingwww.baidu.com3）安装epel-release注：ExtraPackagesforEnterpriseLinux是为“红帽系”的操作系统提供额外的软件包，适用于RHE
花不完根本花不完·2025-05-21 11:16
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他