Kafka日记

Apache Kafka基础指南与实践

本文还有配套的精品资源，点击获取简介：ApacheKafka是一个分布式流处理平台，由LinkedIn开发，后捐赠给Apache软件基金会。
BE东欲·2025-05-30 15:56

Kafka 在 Golang 中的最佳实践：提升你的消息处理能力

Kafka在Golang中的最佳实践：提升你的消息处理能力关键词：Kafka,Golang,消息队列,生产者,消费者,并发处理,性能优化摘要：本文深入探讨如何在Golang中高效集成Kafka，涵盖生产者与消费者的核心原理
Golang编程笔记·2025-05-30 15:20

kafka实践与C++操作kafka

一、集群Kafka架构是由producer（消息生产者）、consumer（消息消费者）、broker（kafka集群的server，负责处理消息读、写请求，存储消息，在Kafkacluster这一层里
源远流长jerry·2025-05-30 14:17

Agent 服务的异步通信与高吞吐优化：Kafka 生产环境深度实践

Agent服务的异步通信与高吞吐优化：Kafka生产环境深度实践关键词：Kafka、Agent异步通信、消息队列优化、事件驱动架构、生产环境部署、吞吐率调优、分区策略、Trace流构建、Broker高可用
观熵·2025-05-30 06:45

kafka面试常见问题(1)

不当的重试机制：如果生产者在不确定消息是否成功发送的情况下重试，可能会导致消息在Kafka中重复，进而被消费者重复消费。消费者组变化：消费者组内的消费者数量变
2401_84182428·2025-05-30 05:12

kafka学习笔记（三、消费者Consumer使用教程——使用实例及及核心流程源码讲解）

1.核心概念与架构1.1.消费者与消费者组Kafka消费者是订阅主题（Topic）并拉取消息的客户端实例，其核心逻辑通过KafkaConsumer类实现。
Timmer丿·2025-05-30 05:12

leetcode hot100刷题日记——27.对称二叉树

方法一：递归法classSolution{public:boolcheck(TreeNode*left,TreeNode*right){//左子树和右子树的节点同时是空的是对称的if(left==nullptr&&right==nullptr){returntrue;}if(left==nullptr||right==nullptr){returnfalse;}//检查左右子树的值相不相等，再检查
姬公子521·2025-05-30 04:03

从方向一详细描述：一个让项目濒临崩溃的致命 Bug

因此，在这个项目中，开发团队采用了先进的微服务架构，利用SpringBoot和Kafka进行服务通信，同时借助MySQL和Redis提供数据存储和缓存支持这
程序员小羊！·2025-05-30 03:21

【SpringBoot整合系列】Kafka的各种模式及Spring Boot整合的使用基础案例

简介ApacheKafka是一个开源的流处理平台，广泛用于构建实时数据流管道和流处理应用程序。Kafka采用发布-订阅模型，并支持多种消息通信模式，如点对点、发布-订阅、流处理等。
苏生Susheng·2025-05-30 01:36

Kafka 参数的整理说明

目录标题✅不需要重启即可生效的参数（动态参数）自动重启生效的参数（重启后自动应用）手动重启才生效的参数（需手动滚动部署）⚠️重点参数建议调整（默认值不够安全或性能不佳）Kafka参数的整理说明，包括每个参数的作用
喝醉酒的小白·2025-05-29 18:20

Python 学习日记 day25

@浙大疏锦行Python的异常处理机制为程序提供了强大的容错能力(faulttolerance)。当程序在运行时遇到意外情况（即异常），它不会直接崩溃，而是可以被设计成优雅地处理这些错误，并可能继续执行后续逻辑（如果设计允许）或以可控的方式结束。当异常发生时，Python会创建一个异常对象(exceptionobject)（通常是Exception类的子类实例）。如果这段可能出错的代码位于try语
heard_222532·2025-05-29 17:45

Hugo 博客搭建日记 1

导航页Hugo博客搭建日记1Hugo博客搭建日记2前言本节将介绍基础环境的搭建(安装Hugo以及初始化仓库)1.环境介绍工作机用的是ubuntu22.04版本2.准备工作2.1下载hugo-extended.deb
Zack996·2025-05-29 12:15

【MQ】消息队列的核心价值及技术选型

文章目录一、什么是消息队列二、消息队列的核心功能三、主流消息队列技术对比ActiveMQ：逐渐淡出的老牌产品Kafka：大数据领域的王者RabbitMQ：企业级可靠选择ApachePulsar：云原生时代的
会飞的架狗师·2025-05-29 11:09

Java消息队列应用：Kafka、RabbitMQ选择与优化

Java消息队列应用：Kafka、RabbitMQ选择与优化在Java应用领域，消息队列是实现异步通信、应用解耦、流量削峰等重要功能的关键组件。
向哆哆·2025-05-29 10:30

如何设计一个支持千万级数据量的搜索系统（结合 MySQL 和 ES）？ES与关系型数据库（MySQL）数据同步方案？如何保证数据库与Elasticsearch的双写一致性？对比采用事务日志与CDC方案

─计算层│├️实时写入集群（处理MySQL写入）││├️双写模块（ES同步组件）││└️本地事务表（保障本地事务）│└️异步处理集群（消费binlog）│├️Canal集群（HA部署）│└️消息分区（Kafka32partitions
搞不懂语言的程序员·2025-05-29 06:57

Debezium系列之：Debezium技术专栏第300篇系列文章之打通Debezium实时采集Oracle数据库数据到Kafka集群的技术

Debezium系列之：Debezium技术专栏第300篇系列文章之打通Debezium实时采集Oracle数据库数据到Kafka集群的技术一、需求描述二、部署Debezium集群和Oracle连接器三
快乐骑行^_^·2025-05-29 05:20

实测开发日记大公开》

实测开发日记大公开》**导语**：你是否还在为重复代码熬夜？当同事用AI工具3小时完成你两天的工作量，是时候解锁这个让全网技术圈沸腾的"智能结对编程"方案了！
RewriteDestiny·2025-05-29 04:10

（一）Kafka 安全之使用 SSL 的加密和身份验证

目录一.前言二.使用SSL的加密和身份验证2.1.为每个KafkaBroker生成SSL密钥和证书2.1.1.主机名验证（HostNameVerification）2.1.2.注意（Note）一.前言SSL
流华追梦·2025-05-29 00:10

Kafka的Java API 基本操作

在Kafka的生态体系中，ApacheKafka原生JavaAPI是开发者与Kafka进行交互的重要工具。
shangjg3·2025-05-28 19:32

Kafka 偏移提交、数据积压与分区再均衡的解决方法

在使用ApacheKafka原生JavaAPI操作消费者时，消费偏移提交、数据积压、分区再均衡是常见且影响系统运行的关键问题。
shangjg3·2025-05-28 19:32

Python 学习日记 day27

@浙大疏锦行下面这个函数实现的是计算2到9999的所有质数（在大于1的自然数中，除了1和它自身外，不能被其他自然数整除的数），并且打印找到这些数需要的时间1.定义一个判断是否为质数2.定义一个函数，循环2到9999的数，通过判断质数函数来筛选每个数3.在函数中通过time模块进行记时会发现，这个time模块让整个代码逻辑很混乱，因为函数的主体是找质数，time模块是找质数的时间，如果可以time模
heard_222532·2025-05-28 15:34

Python 学习日记 day28

@浙大疏锦行总结：Python通过缩进来定义代码块的结构。当解释器遇到像def,class,if,for这样的语句，并且后面跟着冒号:时，它就期望接下来会有一个或多个缩进的语句来构成这个代码块。如果它没有找到任何缩进的语句（即代码块是空的），它就无法确定这个结构的范围，因此会抛出IndentationError。pass语句的存在就是为了解决这个问题：它本身不执行任何操作，但它是一个有效的Pyth
heard_222532·2025-05-28 15:34

Python 学习日记 day22

@浙大疏锦行一、注册与环境配置账号安全注册时使用真实邮箱，避免频繁更换账号导致权限受限。API令牌（kaggle.json）需存储在本地安全目录（如~/.kaggle），并设置权限为chmod600，防止泄露。API配置通过pipinstallkaggle安装客户端，使用kaggleconfigset命令配置默认路径，避免下载大文件时占用系统盘空间。若遇到401/403错误，需检查API令牌是否有
heard_222532·2025-05-28 15:34

Python 学习日记 day17

@浙大疏锦行聚类评估指标介绍以下是三种常用的聚类效果评估指标，分别用于衡量聚类的质量和簇的分离与紧凑程度：1.轮廓系数(SilhouetteScore)定义：轮廓系数衡量每个样本与其所属簇的紧密程度以及与最近其他簇的分离程度。取值范围：[-1,1]轮廓系数越接近1，表示样本与其所属簇内其他样本很近，与其他簇很远，聚类效果越好。轮廓系数越接近-1，表示样本与其所属簇内样本较远，与其他簇较近，聚类效果
heard_222532·2025-05-28 15:04

Python 学习日记 day15

@浙大疏锦行CRWUBearingsSVM_Fault_Classificationimportnumpyasnpfromsklearn.datasetsimportmake_classificationfromsklearn.model_selectionimporttrain_test_splitfromsklearn.linear_modelimportLogisticRegressionf
heard_222532·2025-05-28 15:03

Python学习日记Day1

目录一、Python的安装二、输出print()1，输出单变量后换行——print(*)2，连续输出多个变量不换行——print(*,*,*,*,*)用英文逗号分离3，使用ASCII码进行输出——借助chr()函数4，使用Unicode码进行输出——借助ord()函数5，ASCII码与Unicode码的相互转换6，使用print()函数将内容输出（写入）到文件7，print()函数使用格式——pr
栗知言·2025-05-28 15:03

深入解析Spring Boot与Kafka集成：构建高效消息驱动微服务

深入解析SpringBoot与Kafka集成：构建高效消息驱动微服务引言在现代微服务架构中，消息队列扮演着至关重要的角色，它能够解耦服务之间的依赖，提高系统的可扩展性和可靠性。
Uranus^·2025-05-28 08:19

Kafka | 安装与基础入门

一、Kafka概述首先，Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue）具有分布式、高吞吐量、高可用的特点，主要应用于大数据实时处理领域。
给我一杯珍珠奶茶·2025-05-28 02:00

Kylin Server V10 下基于Kraft模式搭建Kafka集群

一、Kraft模式与ZooKeeper模式简介在Kafka2.8之前，Kafka重度依赖ZooKeeper集群做元数据管理、Controller的选举等（统称为共识服务）；当ZooKeeper集群性能发生抖动时
Mindfulness code·2025-05-28 01:54

centos7.9使用docker-compose安装kafka

docker-compose配置文件services:zookeeper:image:confluentinc/cp-zookeeper:7.0.1hostname:zookeepercontainer_name:zookeeperports:-"2181:2181"environment:ZOOKEEPER_CLIENT_PORT:2181ZOOKEEPER_TICK_TIME:2000kafk
ccsd11·2025-05-28 01:54

Spring Boot与Kafka集成实践：实现高效消息队列

SpringBoot与Kafka集成实践引言在现代分布式系统中，消息队列是实现异步通信和解耦的重要组件。
Uranus^·2025-05-27 23:40

TiCDC 新架构 v9.0.0 使用实践

c3c30ddb一.TiCDC新老架构对比1.不变部分三个模块基本没有改动：Puller（从TiKV拉取变更），Configs&CliAPI（配置和用户操作API），Sink（往下游系统写入数据的模块，比如Kafka
TiDB 社区干货传送门·2025-05-27 22:37

Spark实时流数据处理实例（SparkStreaming通话记录消息处理）

所用资源：通过网盘分享的文件：spark-streaming-kafka-0-8-assembly_2.11-2.4.8.jar等4个文件链接:https://pan.baidu.com/s/1zYHu29tLgDvS_L2Ud
qrh_yogurt·2025-05-27 16:20

深入解析Kafka核心参数：buffer_memory、linger_ms与batch_size的优化之道

欢迎莅临我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。推荐：「stormsha的主页」，「stormsha的知识库」持续学习，不断总结，共同进步，为了踏实，做好当下事儿~非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。✨✨欢迎订阅本专栏✨✨TheStart点点关注，收藏不迷路文章目录1.K
stormsha·2025-05-27 07:56

杏仁玫瑰花饼的Java学习日记第十一天（super，方法重写，多态，instanceof关键字，static关键字，抽象类，接口）

一，前言今天就是第十一天了，继续努力。二，super关键字详解在Java中，super关键字是一个引用变量，主要用于引用直接父类的对象。它在继承关系中扮演着重要角色，能够帮助子类访问父类的属性、方法和构造函数。1.访问父类的成员变量当子类与父类拥有同名的成员变量时，子类默认访问自己的变量。使用super关键字可以显式访问父类的同名变量。示例：classParent{  intnum=10;}​cl
杏仁海棠花饼·2025-05-27 00:47

消息队列中间件——Kafka

文章目录1.什么是消息队列2.Kafka的基本概念3.Kafka的Java生产者3.1配置并创建生产者对象3.2同步发送消息3.3异步发送消息4.Kafka的Java消费者4.1配置并创建消费者对象4.2
文大奇Quiin·2025-05-26 21:31

leetcode hot100刷题日记——17.搜索插入位置

哈喽~第二周刷题开始了，今天这道题虽然属于简单，而且是二分查找模板题，但是我太菜了我感觉有好多可以让我思考的地方。就一起看看这道题目吧~解答：classSolution{public:intsearchInsert(vector&nums,inttarget){//直接二分查找模板intn=nums.size();intleft=0,right=n-1;intmid=0;while(leftnum
姬公子521·2025-05-26 21:31

kafka之操作示例

一、常用shell命令#1、创建topicbin/kafka-topics.sh--create--zookeeperlocalhost:2181--replications1--topictest#2
鲸屿195·2025-05-26 20:26

leetcode hot100刷题日记——第一周没做好的题目总结

第一题：字母异位词分组第一想法：哈希表哈希表的键为字符串，值存见过的次数键的字符串可以按照英文字母排序好，保证键唯一classSolution{public:vector>groupAnagrams(vector&strs){vector>ans;if(strs.size()==0||strs.size()==1){ans.push_back(strs);returnans;}unordered_
姬公子521·2025-05-26 20:56

Spring Cloud Stream 配置及使用（以 RabbitMQ 为例）

SpringCloudStream配置及使用（以RabbitMQ为例）SpringCloudStream是Spring提供的消息驱动微服务框架，它将消息中间件（如RabbitMQ、Kafka）与SpringBoot
maxThking·2025-05-26 19:52

消息队列选型之Kafka + Spring Boot详细实战

消息队列选型之Kafka+SpringBoot详细实战一、消息队列选型：KafkavsRabbitMQvsRocketMQ1.选型关键维度维度KafkaRabbitMQRocketMQ吞吐量百万级/秒（
danny-IT技术博客·2025-05-26 18:48

Missashe考研日记—Day44-Day50

Missashe考研日记—Day44-Day50写在面前本系列博客用于记录博主一周的学习进度，具体知识总结在目前已有的笔记中：1.高数强化学习笔记2.计网复习笔记3.新增：线代题型总结专业课408这周先是把计网第三章数据链路层剩下的局域网以及之后的内容学完了
LVerrrr·2025-05-26 17:40

服务攻防-中间件安全&CVE 复现&Apache&Tomcat&Nginx

解析漏洞(CVE-2013-4547)1.2Nginx文件解析漏洞复现1.3Nginx任意代码执行漏洞（CVE-2021-23017）Nginx1.1.9DNS解析漏洞(CVE-2021-23017)修复日记
@Camelus·2025-05-26 15:31

深入解析Spring Boot与Kafka集成：构建高性能消息驱动应用

深入解析SpringBoot与Kafka集成：构建高性能消息驱动应用引言在现代分布式系统中，消息队列是实现异步通信和解耦的关键技术之一。
Uranus^·2025-05-26 14:55

深入解析Spring Boot与Kafka集成：构建高效消息驱动微服务

深入解析SpringBoot与Kafka集成：构建高效消息驱动微服务引言在现代微服务架构中，消息队列扮演着至关重要的角色，尤其是在处理高并发、异步通信和解耦系统组件时。
Uranus^·2025-05-26 14:53

深入解析Spring Boot与Kafka的集成实践

深入解析SpringBoot与Kafka的集成实践引言在现代分布式系统中，消息队列扮演着至关重要的角色。
Uranus^·2025-05-26 14:53

【C/C++】从零开始掌握Kafka

文章目录从零开始掌握Kafka一、Kafka基础知识理解（理论）1.核心组件与架构2.重点概念解析二、Kafka面试重点知识梳理三、C++使用Kafka的实践（librdkafka）1.librdkafka
CodeWithMe·2025-05-26 08:49

Kafka Consumer工作流程

KafkaConsumer工作流程图1、启动与加入组消费者启动后，会向Kafka集群中的某个Broker发送请求，请求加入特定消费者组。
WZMeiei·2025-05-26 08:43

如何保证 Kafka 数据实时同步到 Elasticsearch？

Kafka数据实时同步到Elasticsearch数据同步核心配置文件(需要创建新文件)name=elasticsearch-sinkconnector.class=io.confluent.connect.elasticsearch.ElasticsearchSinkConnectortasks.max
搞不懂语言的程序员·2025-05-26 04:21

Spring Boot与Kafka集成实践：从入门到实战

SpringBoot与Kafka集成实践引言在现代分布式系统中，消息队列技术扮演着至关重要的角色。
Uranus^·2025-05-26 04:19
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他