不重启kafka集群第3页

hadoop集群配置-scp拓展使用

任务1：在hadoop102上，将hadoop101中/opt/module/hadoop-3.1.3目录拷贝到hadoop102上。分析：使用scp进行拉取操作：先登录到hadoop2使用命令：scp-rroot@hadoop101:/opt/module/hadoop-3.1.3/opt/module/任务2：在hadoop101上操作，将hadoop100中/opt/module目录下所有目

杜清卿·2025-03-22 06:28

SpringBoot集成Pulsar 生产者与消费者示例代码

功能特点Pulsar的主要功能如下：原生支持Pulsar实例中的多个集群，并可跨集群无缝地复制消息。非常低的发布和端到端延迟。无缝扩展到超过一百万个主题。

七维大脑·2025-03-22 04:05

ZooKeeper集群高可用性测试与实践：从规划到故障模拟

#作者：任少近文章目录ZooKeeper集群环境规划1.集群数据一致性测试2.集群节点故障测试ZooKeeper集群高可用性测试的主要目的是确保在分布式环境中，ZooKeeper服务能够持续提供一致性和高可用性的协调服务

磐基Stack专业服务团队·2025-03-22 03:29

Kafka跨集群数据备份与同步：MirrorMaker运用

#作者：张桐瑞文章目录前言MirrorMaker是什么运行MirrorMaker各个参数的含义前言在大多数情况下，我们会部署一套Kafka集群来支撑业务需求。

磐基Stack专业服务团队·2025-03-22 03:22

【大模型系列】SFT（Supervised Fine-Tuning，监督微调）

Kwan的解忧杂货铺@新空间代码工作室·2025-03-22 02:20

深入理解 Kafka 的 ConsumerRebalanceListener

深入理解Kafka的ConsumerRebalanceListener在分布式系统中，数据的一致性和可靠性是至关重要的。

t0_54coder·2025-03-22 02:18

如何解决Kafka Rebalance引起的重复消费

在Kafka中，Rebalance（再平衡）是消费者组（ConsumerGroup）动态调整分区分配的过程。

maozexijr·2025-03-22 02:47

istio 介绍-01-一个用于连接、管理和保护微服务的开放平台概览

Istio的控制平面在底层集群管理平台（例如Kubernetes）上提供了一个抽象层。

·2025-03-22 01:01

知识蒸馏：让大模型“瘦身“而不失智慧的魔术

GPT-4的1750亿参数需要价值500万美元的GPU集群运行，但现实中的智能设备可能只有指甲盖大小。

一休哥助手·2025-03-21 21:06

YashanDB恢复

共享集群部署中，只能在主集群上执行恢复操作（即其角色必须为MASTER\_ROLE，可查询视图

·2025-03-21 20:51

YashanDB SQL命令备份恢复

YashanDB官网，原文内容请见https://doc.yashandb.com/yashandb/23.3/zh/%E6%95%B0%E6%8D%AE%...SQL命令方式的备份恢复操作适用于单机/共享集群部署的数据库

·2025-03-21 20:21

亿级分布式系统架构演进实战（一）- 总体概要

演进路线大纲阶段一：横向扩展（应对万级QPS）核心目标：突破单机性能瓶颈，建立弹性基础[Nginx]/|\[App1][App2][App3]←无状态服务集群\|/[DBProxy]←读写分离中间件/\

power-辰南·2025-03-21 18:35

Kafka深度解析

本文转发自Jason’sBlog，原文链接http://www.jasongj.com/2015/01/02/Kafka深度解析背景介绍Kafka简介Kafka是一种分布式的，基于发布/订阅的消息系统。

GarfieldEr007·2025-03-21 17:55

【赵渝强老师】达梦数据库MPP集群的架构

为了支持海量数据存储和处理等方面的需求，为高端数据仓库提供解决方案，达梦数据库提供了大规模并行处理MPP架构，以极低的成本代价，提供高性能的并行计算。通过使用MPP可以解决以下问题：需要较高的系统性能支持以支持大量的复杂查询操作硬件束缚对数据库响应能力的影响降低数据库成本视频讲解如下：https://www.bilibili.com/video/BV1dBftYoEkk/?aid=11386961

·2025-03-21 16:12

优化Apache Spark性能之JVM参数配置指南

同时，要根据具体的工作负载和集群配置进行调整，并定期监控Spark应

weixin_30777913·2025-03-21 13:58

关于kafka常见的问题小结

目录1.Kafka怎么避免重复消费1.1什么时候出现重复消费1.2如何处理重复消费问题2.Kafka怎么保证消息不丢失2.1Producer2.2Broker2.3Consumer3.Kafka怎么保证消息消费的顺序最近面试遇到一些常见

BAStriver·2025-03-21 13:51

【Kafka高级】Kafka性能优化与调优实践

在大规模数据处理和实时消息传递场景中，Kafka的性能优化至关重要。

全栈追梦人·2025-03-21 12:50

【K8S】ImagePullBackOff状态问题排查。

含义当你在K8s集群中创建一个Pod时，Kubelet会尝试从指定的镜像仓库拉取所需的容器镜像。如果拉取镜像失败，Kubelet会进行重试。

执键行天涯·2025-03-21 12:13

消息中间件：RabbitMQ、Kafka 和 Redis如何选择？一文让您了解！

RabbitMQ、Kafka和Redis是三种常见的消息中间件，它们各自具有不同的特点和适用的场景。

写bug如流水·2025-03-21 12:09

Kafka Connect Node.js Connector 指南

KafkaConnectNode.jsConnector指南kafka-connectequivalenttokafka-connect:wrench:fornodejs:sparkles::turtle

丁操余·2025-03-21 12:39

消息中间件选型: kafka与rabbitmq的对比

RabbitMQ总结_陈海龙的格物之路-CSDN博客https://blog.csdn.net/chl87783255/article/details/122606212kafka总结_陈海龙的格物之路

HS_Henry·2025-03-21 12:39

helm安装kubernetes-dashboard(2，Linux运维开发技巧

当前k8s集群版本1.23.61.1添加repo[root@masterhelm]#helmrepoaddkubernetes-dashboardhttps://kubernetes.github.io

2401_83974783·2025-03-21 11:06

RabbitMQ 与 Kafka：消息中间件的终极对比与选型指南

RabbitMQ和Kafka作为两大主流技术，常被开发者拿来比较。本文深入解析两者的设计哲学、性能差异和典型场景，助你做出精准技术选型。

海上彼尚·2025-03-21 11:35

Docker Compose 和 Kubernetes（K8s）对比

DockerCompose和Kubernetes的区别对比项DockerComposeKubernetes（K8s）核心作用管理多个Docker容器管理容器编排（大规模应用）适用环境本地开发、测试环境生产环境、大规模集群容器编排能力基础编排

孽小倩·2025-03-21 09:49

#Hadoop全分布式安装 #mysql安装 #hive安装

分布式（多台机器部署不同组件）与集群（多台机器部署相同组件）概念。Linux基础命令linux具有文件数：目录、文件，从根目录开始，路径具有唯一性。pwd：显示当前路径特殊符号：/：根目录.

砸吧砸吧·2025-03-21 09:14

OpenEuler kinit报错找不到文件的解决办法

客户一套华为大数据集群平台,在一台arm平台openEuler服务器上面安装完集群客户端之后,使用kinit认证出现报错Nosuchfileordirectory:最终定位是操作系统/lib64缺少ld

久违的太阳·2025-03-21 08:38

Redis 三主三从集群部署的完整方案

一、架构设计原理‌分布式数据分片哈希槽机制‌：RedisCluster将数据划分为16384个槽位，每个主节点负责部分槽位（如主节点1管理槽0-5460，主节点2管理5461-10922等）。自动负载均衡‌：数据按哈希值分配到不同节点，避免单点性能瓶颈。高可用基础‌：每个主节点配置至少一个从节点，主节点故障时自动切换从节点接替。故障转移流程哨兵协同‌：3个哨兵节点通过投票机制（quorum=2）决

Honmaple·2025-03-21 07:03

FlinkCDC实战：将 MySQL 数据同步至 ES

加速订单数据的查询.同步数据到es.概述1.什么是CDC2.什么是FlinkCDC3.FlinkCDCConnectors和Flink的版本映射实战1.宽表查询1.1创建mysql表1.2启动Flink集群和

小DuDu·2025-03-21 04:08

【DevOps】Rancher：rancher2.4.16 高可用安装文档

spm=1003.2001.3001.4143RancherHA集群安装部署当前最新版本V2.4.16安装流程：rke安装k8s，在k8s集群上搭建helm，通过helm创建rancher容器应用节点名称

运维归一·2025-03-21 00:36

RocketMQ 和 Kafka

✅RocketMQ和Kafka是两种非常流行的分布式消息队列系统，它们广泛用于大规模、高并发的消息传递和事件驱动架构中。虽然它们都属于消息队列，但在设计理念、特性和应用场景上有一些差异。

重生之我在成电转码·2025-03-21 00:02

springboot+kafka+邮件发送（最佳实践）

导读集成spring-kafka，生产者生产邮件message，消费者负责发送引入线程池，多线程发送消息多邮件服务器配置定时任务生产消息；计划邮件发送实现过程导入依赖1.85.1.382.1.51.3.22.8.23.4org.springframework.bootspring-boot-starterorg.springframework.bootspring-boot-starter-tes

weixin_30347335·2025-03-20 23:54

mysql vs oracle

架构：多进程架构（每个用户连接对应独立进程），支持分布式集群（如RAC）。MySQL：定位：轻量级开源数据库，适合中小型应用及Web开发。授

HBryce24·2025-03-20 22:51

云原生分布式存储：数据洪流中的时空折叠艺术

引言：数据维度战争的新防线蚂蚁集团存储集群达500EB规模，Netflix每日处理3PB视频数据。AWSS3支持每秒1.5亿次请求，字节跳动对象存储延迟低至12ms。

桂月二二·2025-03-20 22:15

OceanBase数据库常用巡检SQL

一、版本信息select*frominformation_schema.GLOBAL_VARIABLESWHEREVARIABLE_NAMElike'version%';二、集群状态select*fromoceanbase.v

MoMoSQL666·2025-03-20 22:42

【硬核实战】ETCD+AI智能调度深度整合！从架构设计到调优避坑，手把手教你打造高可用调度系统！

架构图：[AI调度引擎]←实时数据→[ETCD集群]↓决策指令[执行层（车辆/物流/交通设备）]核心角色：ETCD：存储调度策略、节点状态、任务队列、实时环境数据（如交通流量、天气）AI模型：基于ETCD

码农突围计划·2025-03-20 19:50

软件定义世界下的教育创新：高校计算机实验室应重心转向开源平台

一、一键式教学环境部署，节省90%准备时间•应用模板库：提供200+预置教学工具模板（如JupyterLab+TensorFlow、MySQL集群），教师可根据课程需求选择模板，5分钟内完成包含依赖库、

·2025-03-20 18:59

大规模语言模型从理论到实践分布式训练的集群架构

大规模语言模型从理论到实践分布式训练的集群架构作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming1.背景介绍1.1问题的由来随着深度学习技术的飞速发展，大规模语言模型

AI智能涌现深度研究·2025-03-20 18:14

Couchbase Analytics 的结构

1.Couchbase集群架构CouchbaseServer是一个多维度可扩展的分布式数据库，其核心架构由多个服务组成：数据服务（DataService

PersistDZ·2025-03-20 18:10

基于k8s集群免密拉取需认证的仓库镜像

一、环境背景1、k8s集群，1.17+，目前k8s最新版本已更新至V1.31版本；2、镜像仓库，如harbor、registry、portus、nexus等；3、配置镜像仓库用户登录认证，参考资料如下：

星溢·2025-03-20 14:11

RabbitMQ 集群降配

这里写自定义目录标题摘要检查状态1.检查RabbitMQ服务状态2.检查RabbitMQ端口监听3.检查RabbitMQ管理插件是否启用4.检查开机自启状态5.确认集群高可用性6.检查使用该集群的服务是否做了断开重连实操

Hover_Z_快跑·2025-03-20 14:40

ubuntu高并发内核参数调优 - （压测客户端调优）

业务上要求集群提供10w+并发，10w+并发听上去不是很难，但10w并发持续1小时呢在业务上线之前还需要我们自己对业务进行压测，俗称benchmark。

sj1163739403·2025-03-20 14:40

zookeeper&nacos&kafka之间的联系

一、ZooKeeper与Kafka的协同工作原理1.核心关系：Kafka对ZooKeeper的依赖在Kafka2.8版本之前，ZooKeeper是Kafka集群的“大脑”，负责管理集群元数据、协调节点状态和故障恢复

Gold Steps.·2025-03-20 11:19

Kafka集群部署实战

服务背景ApacheKafka作为分布式流处理平台，在金融交易系统、物联网数据处理、实时日志分析等场景中发挥关键作用。

Gold Steps.·2025-03-20 11:49

基于Ubuntu22.04操作系统部署k8s1.28集群

IP地址主机名角色192.168.200.16mastermaster192.168.200.17k8s-node1worker192.168.200.18k8s-node2worker基础环境准备tips：以下操作三个节点都要完成修改host文件&&关闭防火墙&&配置时间与时区&&关闭Swap&&开启IPv4转发（三个节点）root@cfc:~#systemctlstopufwroot@cfc:

Gold Steps.·2025-03-20 11:19

Java面试八股之Redis集群Cluster

Redis集群ClusterRedisCluster是一种基于数据分片（Sharding）的分布式缓存和存储系统，它实现了数据的水平扩展、高可用性和自动故障转移。

天哥不爱学习·2025-03-20 09:33

java八股之redis面试题

、Redis底层数据是如何用跳表来存储的4、RedisKey过期了为什么内存没释放（附删除策略）5、Redis没设置key的过期时间，为什么被Redis主动删除了（淘汰策略）6、Redis主从、哨兵、集群架构优缺点比较

MinusZXX·2025-03-20 09:28

Fastdfs-V5.11使用docker部署集群(X86)

部署信息三、步骤tracker/storage机器的compose内容storage机器的composetracker与storage启动目录层级与配置文件client.confstorage.conf查看集群信息测试测试集群扩容与缩减

礁之·2025-03-20 07:11

Redis客户端jedis与lettuce的区别

它支持高级的Redis特性，如Sentinel、集群、流水线、自动重新连接和redis数据模型等。

风雨无阻1203·2025-03-20 03:17

基于Docker 搭建Redis三主三从分布式集群

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、分布式系统规划二、准备配置文件1.创建redis集群目录三、启动Redis容器四、创建分布式系统1.创建集群2.查看节点信息总结前言提示

DBA学习之路·2025-03-20 03:47

Linux:kubeadm⽅式部署k8s集群

1.kubeadm创建环境k8s-master192.168.150.11k8s-node1192.168.150.12k8s-node2192.168.150.13三台节点都安装docker#Step1:安装必要的一些系统工具sudoyuminstall-yyum-utilsdevice-mapper-persistent-datalvm2#Step2:添加软件源信息sudoyum-config

陈婷婷1·2025-03-20 03:09

推荐频道

不重启kafka集群