集群监控工具第2页

DMDDM文档数据库学习分享

合作愉快：）·2025-03-23 05:40

flink作业访问zk出现acl报错问题分析

#问题现象向yarn集群提交flink作业的时候会出现zkacl的异常经确认：1.zk相关acl密码没有更改过2.重新部署客户端配置后提交任务同样报错3.修改flink的zk目录，重启后可以正常运行任务

spring208208·2025-03-23 03:47

Hadoop 集群规划与部署最佳实践

作者：禅与计算机程序设计艺术1.简介2009年2月2日，ApacheHadoop项目诞生。它是一个开源的分布式系统基础架构，用于存储、处理和分析海量的数据。Hadoop具有高容错性、可靠性、可扩展性、适应性等特征，因而广泛应用于数据仓库、日志分析、网络流量监测、推荐引擎、搜索引擎等领域。由于Hadoop采用“分而治之”的架构设计理念，因此可以轻松应对数据量、计算能力和存储成本的增长。2013年底，

AI天才研究院·2025-03-23 03:47

k8s学习笔记（3）--- kubernetes核心技术概念

kubernetes核心技术概念1.容器（Container）2.API对象3.集群（Cluster）4.Master5.Node6.Pod7.复制控制器（ReplicationController，RC

梦谜·2025-03-23 01:02

HBase的架构介绍，安装及简单操作

Hadoop环境：HBase依赖于Hadoop，需要先安装并配置好Hadoop集群。确保Hadoop的相关服务（如HDFS、YARN等）已经正常启动。

pk_xz123456·2025-03-23 01:00

linux渲染农场大连教程,Deadline 渲染农场搭建记录

渲染农场的工作模式：多台机器组建集群进行渲染，比如：集群中有2台渲染机器A和B，服务器会同时分配给A和B任务，A渲染第一帧,B渲染第二帧，当A完成那么服务器会继续分配第三帧，同样B服务器完成以后服务器分配第四帧

温柔彭于晏·2025-03-23 01:58

Kafka常见问题

Kafka集群，常见MQ面试问题Kafka集群，常见MQ问题Kafka名词介绍•Topic:消息队列，生产者和消费者面向的都是一个Topic•Broker:一个Kafka服务器就是一个Broker，一个集群由多个

C18298182575·2025-03-23 00:19

云原生周刊丨CIO 洞察：Kubernetes 解锁 AI 新纪元

它旨在优化资源管理，确保K8s集群中的网络资源能够按需高效分配。DRANET采用Apache-2.0开源许可，鼓励社区贡献与扩展，是云原生环境下提升网络性能的创新解决方案。

KubeSphere 云原生·2025-03-22 22:43

k8s集群版本升级

Kubernetes集群版本升级是为了获得最新的功能、增强的安全性和性能改进。然而，升级过程需要谨慎进行，特别是在生产环境中。

少陽君·2025-03-22 22:42

新书速览|云原生Kubernetes自动化运维实践

《云原生Kubernetes自动化运维实践》本书内容：《云原生Kubernetes自动化运维实践》以一名大型企业集群运维工程师的实战经验为基础，全面系统地阐述Kubernetes（K8s）在自动化运维领域的技术应用

全栈开发圈·2025-03-22 22:11

分析K8S中Node状态为`NotReady`问题

在Kubernetes（k8s）集群中，Node状态为NotReady通常意味着节点上存在某些问题，下面为你分析正常情况下节点应运行的容器以及解决NotReady状态的方法。

网络飞鸥·2025-03-22 22:09

2023年全国职业院校技能大赛（高职组）“云计算应用”赛项赛卷10（公有云）

模块三公有云（40分）企业选择国内公有云提供商，选择云主机、云网络、云硬盘、云防火墙、负载均衡等服务，可创建Web服务，共享文件存储服务，数据库服务，数据库集群等服务。

忘川_ydy·2025-03-22 21:05

大规异构集群混合并行分布式训练系统，解决算力不均衡问题 HETHUB

视频教程在这：3.2大规模异构集群，混合并行分布式系统，解释算力不均衡问题HETHUB_哔哩哔哩_bilibili一、大规模异构集群出现的原因：同一种GPU数量有限难以构建大规模集群：训练大规模模型依赖于大量的计算资源

爱串门的小马驹·2025-03-22 16:29

hadoop3.x--搭建hadoop高可用集群（HA模式）

hadoop高可用集群（HA模式）一、安装前1.集群规划2.安装前配置3.安装jdk与hadoop4.克隆虚拟机与互信配置5.搭建zookeeper集群二、HDFS1.配置hdfs2.初始化启动hdfs

运维小菜·2025-03-22 14:17

从零到一：Redis Cluster部署配置全流程详解，轻松搞定高可用分布式缓存！

本文将详细介绍RedisCluster的部署和配置全流程，帮助读者快速搭建一个高可用的Redis集群。1RedisCluster概述

IT成长日记·2025-03-22 14:07

【颠覆性缓存架构】Caffeine双引擎缓存实战:CPU和内存双优化，命中率提升到92%，内存减少75%

一、经典方案的致命陷阱：资源浪费之谜1.1真实事故现场案例回放：某电商大促期间，缓存集群CPU飙升至90%导

Julian.zhou·2025-03-22 09:28

K8S集群新增和删除Node节点（K8s Cluster Adds and Removes Node Nodes）

实战：在已有K8S集群如何新增和删除Node节点在Kubernetes(K8S)集群中，Node节点是集群中的工作节点，它们运行着容器的实际实例。

Linux运维老纪·2025-03-22 08:17

hadoop集群配置-scp拓展使用

任务1：在hadoop102上，将hadoop101中/opt/module/hadoop-3.1.3目录拷贝到hadoop102上。分析：使用scp进行拉取操作：先登录到hadoop2使用命令：scp-rroot@hadoop101:/opt/module/hadoop-3.1.3/opt/module/任务2：在hadoop101上操作，将hadoop100中/opt/module目录下所有目

杜清卿·2025-03-22 06:28

SpringBoot集成Pulsar 生产者与消费者示例代码

功能特点Pulsar的主要功能如下：原生支持Pulsar实例中的多个集群，并可跨集群无缝地复制消息。非常低的发布和端到端延迟。无缝扩展到超过一百万个主题。

七维大脑·2025-03-22 04:05

ZooKeeper集群高可用性测试与实践：从规划到故障模拟

#作者：任少近文章目录ZooKeeper集群环境规划1.集群数据一致性测试2.集群节点故障测试ZooKeeper集群高可用性测试的主要目的是确保在分布式环境中，ZooKeeper服务能够持续提供一致性和高可用性的协调服务

磐基Stack专业服务团队·2025-03-22 03:29

Kafka跨集群数据备份与同步：MirrorMaker运用

#作者：张桐瑞文章目录前言MirrorMaker是什么运行MirrorMaker各个参数的含义前言在大多数情况下，我们会部署一套Kafka集群来支撑业务需求。

磐基Stack专业服务团队·2025-03-22 03:22

istio 介绍-01-一个用于连接、管理和保护微服务的开放平台概览

Istio的控制平面在底层集群管理平台（例如Kubernetes）上提供了一个抽象层。

·2025-03-22 01:01

知识蒸馏：让大模型“瘦身“而不失智慧的魔术

GPT-4的1750亿参数需要价值500万美元的GPU集群运行，但现实中的智能设备可能只有指甲盖大小。

一休哥助手·2025-03-21 21:06

YashanDB恢复

共享集群部署中，只能在主集群上执行恢复操作（即其角色必须为MASTER\_ROLE，可查询视图

·2025-03-21 20:51

YashanDB SQL命令备份恢复

YashanDB官网，原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E6%95%B0%E6%8D%AE%...SQL命令方式的备份恢复操作适用于单机/共享集群部署的数据库

·2025-03-21 20:21

亿级分布式系统架构演进实战（一）- 总体概要

演进路线大纲阶段一：横向扩展（应对万级QPS）核心目标：突破单机性能瓶颈，建立弹性基础[Nginx]/|\[App1][App2][App3]←无状态服务集群\|/[DBProxy]←读写分离中间件/\

power-辰南·2025-03-21 18:35

【赵渝强老师】达梦数据库MPP集群的架构

为了支持海量数据存储和处理等方面的需求，为高端数据仓库提供解决方案，达梦数据库提供了大规模并行处理MPP架构，以极低的成本代价，提供高性能的并行计算。通过使用MPP可以解决以下问题：需要较高的系统性能支持以支持大量的复杂查询操作硬件束缚对数据库响应能力的影响降低数据库成本视频讲解如下：https://www.bilibili.com/video/BV1dBftYoEkk/?aid=11386961

·2025-03-21 16:12

优化Apache Spark性能之JVM参数配置指南

同时，要根据具体的工作负载和集群配置进行调整，并定期监控Spark应

weixin_30777913·2025-03-21 13:58

【Kafka高级】Kafka性能优化与调优实践

本文将从生产者性能优化、消费者性能优化以及集群性能调优三个方面展开，结合实际代码示例和配置参数，帮助读者更好地理解和应用Kafka性能优化策略。

全栈追梦人·2025-03-21 12:50

【K8S】ImagePullBackOff状态问题排查。

含义当你在K8s集群中创建一个Pod时，Kubelet会尝试从指定的镜像仓库拉取所需的容器镜像。如果拉取镜像失败，Kubelet会进行重试。

执键行天涯·2025-03-21 12:13

helm安装kubernetes-dashboard(2，Linux运维开发技巧

当前k8s集群版本1.23.61.1添加repo[root@masterhelm]#helmrepoaddkubernetes-dashboardhttps://kubernetes.github.io

2401_83974783·2025-03-21 11:06

RabbitMQ 与 Kafka：消息中间件的终极对比与选型指南

目录引言一、核心设计差异1.定位与数据模型二、性能与架构对比1.吞吐量与延迟2.集群与扩展三、功能特性对决1.消息可靠性2.消息路由四、典型场景与选型决策1.优先选择Kafka的场景2.优先选择RabbitM

海上彼尚·2025-03-21 11:35

Docker Compose 和 Kubernetes（K8s）对比

DockerCompose和Kubernetes的区别对比项DockerComposeKubernetes（K8s）核心作用管理多个Docker容器管理容器编排（大规模应用）适用环境本地开发、测试环境生产环境、大规模集群容器编排能力基础编排

孽小倩·2025-03-21 09:49

#Hadoop全分布式安装 #mysql安装 #hive安装

分布式（多台机器部署不同组件）与集群（多台机器部署相同组件）概念。Linux基础命令linux具有文件数：目录、文件，从根目录开始，路径具有唯一性。pwd：显示当前路径特殊符号：/：根目录.

砸吧砸吧·2025-03-21 09:14

OpenEuler kinit报错找不到文件的解决办法

客户一套华为大数据集群平台,在一台arm平台openEuler服务器上面安装完集群客户端之后,使用kinit认证出现报错Nosuchfileordirectory:最终定位是操作系统/lib64缺少ld

久违的太阳·2025-03-21 08:38

Redis 三主三从集群部署的完整方案

一、架构设计原理‌分布式数据分片哈希槽机制‌：RedisCluster将数据划分为16384个槽位，每个主节点负责部分槽位（如主节点1管理槽0-5460，主节点2管理5461-10922等）。自动负载均衡‌：数据按哈希值分配到不同节点，避免单点性能瓶颈。高可用基础‌：每个主节点配置至少一个从节点，主节点故障时自动切换从节点接替。故障转移流程哨兵协同‌：3个哨兵节点通过投票机制（quorum=2）决

Honmaple·2025-03-21 07:03

FlinkCDC实战：将 MySQL 数据同步至 ES

加速订单数据的查询.同步数据到es.概述1.什么是CDC2.什么是FlinkCDC3.FlinkCDCConnectors和Flink的版本映射实战1.宽表查询1.1创建mysql表1.2启动Flink集群和

小DuDu·2025-03-21 04:08

运维颠覆！一文解锁AI赋能运维实战秘籍，效率飙升！

一、AI在故障预测与诊断中的实战故障预测实战数据收集：以Linux服务器为例，利用Prometheus监控工具收集服务器的CPU使用率、内存使用率、

ivwdcwso·2025-03-21 02:56

【DevOps】Rancher：rancher2.4.16 高可用安装文档

spm=1003.2001.3001.4143RancherHA集群安装部署当前最新版本V2.4.16安装流程：rke安装k8s，在k8s集群上搭建helm，通过helm创建rancher容器应用节点名称

运维归一·2025-03-21 00:36

mysql vs oracle

架构：多进程架构（每个用户连接对应独立进程），支持分布式集群（如RAC）。MySQL：定位：轻量级开源数据库，适合中小型应用及Web开发。授

HBryce24·2025-03-20 22:51

云原生分布式存储：数据洪流中的时空折叠艺术

引言：数据维度战争的新防线蚂蚁集团存储集群达500EB规模，Netflix每日处理3PB视频数据。AWSS3支持每秒1.5亿次请求，字节跳动对象存储延迟低至12ms。

桂月二二·2025-03-20 22:15

OceanBase数据库常用巡检SQL

一、版本信息select*frominformation_schema.GLOBAL_VARIABLESWHEREVARIABLE_NAMElike'version%';二、集群状态select*fromoceanbase.v

MoMoSQL666·2025-03-20 22:42

【硬核实战】ETCD+AI智能调度深度整合！从架构设计到调优避坑，手把手教你打造高可用调度系统！

架构图：[AI调度引擎]←实时数据→[ETCD集群]↓决策指令[执行层（车辆/物流/交通设备）]核心角色：ETCD：存储调度策略、节点状态、任务队列、实时环境数据（如交通流量、天气）AI模型：基于ETCD

码农突围计划·2025-03-20 19:50

软件定义世界下的教育创新：高校计算机实验室应重心转向开源平台

一、一键式教学环境部署，节省90%准备时间•应用模板库：提供200+预置教学工具模板（如JupyterLab+TensorFlow、MySQL集群），教师可根据课程需求选择模板，5分钟内完成包含依赖库、

·2025-03-20 18:59

大规模语言模型从理论到实践分布式训练的集群架构

大规模语言模型从理论到实践分布式训练的集群架构作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来随着深度学习技术的飞速发展，大规模语言模型

AI智能涌现深度研究·2025-03-20 18:14

Couchbase Analytics 的结构

1.Couchbase集群架构CouchbaseServer是一个多维度可扩展的分布式数据库，其核心架构由多个服务组成：数据服务（DataService

PersistDZ·2025-03-20 18:10

基于k8s集群免密拉取需认证的仓库镜像

一、环境背景1、k8s集群，1.17+，目前k8s最新版本已更新至V1.31版本；2、镜像仓库，如harbor、registry、portus、nexus等；3、配置镜像仓库用户登录认证，参考资料如下：

星溢·2025-03-20 14:11

RabbitMQ 集群降配

这里写自定义目录标题摘要检查状态1.检查RabbitMQ服务状态2.检查RabbitMQ端口监听3.检查RabbitMQ管理插件是否启用4.检查开机自启状态5.确认集群高可用性6.检查使用该集群的服务是否做了断开重连实操

Hover_Z_快跑·2025-03-20 14:40

ubuntu高并发内核参数调优 - （压测客户端调优）

业务上要求集群提供10w+并发，10w+并发听上去不是很难，但10w并发持续1小时呢在业务上线之前还需要我们自己对业务进行压测，俗称benchmark。

sj1163739403·2025-03-20 14:40

zookeeper&nacos&kafka之间的联系

一、ZooKeeper与Kafka的协同工作原理1.核心关系：Kafka对ZooKeeper的依赖在Kafka2.8版本之前，ZooKeeper是Kafka集群的“大脑”，负责管理集群元数据、协调节点状态和故障恢复

Gold Steps.·2025-03-20 11:19

推荐频道

集群监控工具