kafka迁

ZooKeeper 安装教程（Windows + Linux 双平台）

ZooKeeper安装教程（Windows+Linux双平台）Zookeeper和Kafka版本与JDK要求一、安装前准备系统要求Java环境（JDK17+）开放端口：2181（客户端），2888（集群通信
白嫖不白嫖·2025-06-06 10:01

【kafka原理】Kafka生产者 (分区策略和ACK应答机制)

分区原则我们需要将producer发送的数据封装成一个ProducerRecord对象指明partition的情况下，直接将指明的值直接作为partiton值;没有指明partition值但有key的情况下，将key的hash值与topic的partition数进行取余得到partition值;既没有partition值又没有key值的情况下，第一次调用时随机生成一个整数(后面每次调用在这个整数上
·2025-06-06 00:56

记一次·Spark读Hbase

这个表是flume消费kafka写hive。但是kafka里只保存最近7天数据，有部分数据kafka里已经没有了。不过这份数据会同时被消费到HBase内存储一份，并且HBase内的数据是正常的。
·2025-06-06 00:55

RAG：大模型微调的革命性增强——检索增强生成技术深度解析

一、大模型的核心困境：知识固化与幻觉痛点场景：医疗诊断中模型给出过时治疗方案（知识截止2023年）法律咨询引用已废止的法规条款技术文档生成混淆相似术语（如Kafka与RabbitMQ）
摘取一颗天上星️·2025-06-05 22:13

Java供应链可视化的实时库存管理：3大核心模块+5个实战技巧，库存周转率提升300%！

1.1核心模块设计消息队列：Kafka/RabbitMQ实时推送库存变动WebSocket：前端实时接收数据，更新
墨瑾轩·2025-06-05 19:17

云原生时代 Kafka 深度实践：06原理剖析与源码解读

6.1消息存储机制日志分段（LogSegment）Kafka的消息日志以分段（Segment）形式存储，每个Segment包含一个数据文件（.log）和两个索引文件（.index和.timeindex）
忆雾屿·2025-06-05 17:01

Java全栈面试实录：从电商场景到AI大模型，求职者如何应对技术栈风暴

我用SpringCloudGateway做网关，服务注册用Eureka，配置中心是Nacos，订单服务用SpringDataJPA，消息队列是Kafka……面试官（点头）：很好。
程序员rem·2025-06-05 15:54

Kafka消息队列

2：消息队列的特征（1）存储（2）异步3：为什么需要消息队列二：Kafka基础与入门1：Kafka基本概念2：Kafka相关术语3：Kafka拓扑架构4：Topic与partition5：producer
52830·2025-06-05 14:45

kafka消息队列

目录什么是消息队列消息队列的特征为什么要消息队列kafka基本概念kafka相关术语kafka拓扑架构topic和partitionproducse生产机制Consumer消费机制zookeeper概念介绍
惊起白鸽450·2025-06-05 09:13

Kafka消息队列

Kafka的核心概念及角色Broker：Kafka集群包含一个或多个服务器，每个服务器被称为br
2401_83683659·2025-06-05 07:26

大数据领域 Kafka 集群搭建与优化策略

大数据领域Kafka集群搭建与优化策略关键词：Kafka集群、分布式消息系统、集群搭建、性能优化、吞吐量提升、高可用性、容灾策略摘要：本文系统阐述ApacheKafka集群的核心架构、搭建流程及深度优化策略
AI天才研究院·2025-06-05 07:53

云原生时代 Kafka 深度实践：05性能调优与场景实战

5.1性能调优全攻略Producer调优批量发送与延迟发送通过调整batch.size和linger.ms参数提升吞吐量：props.put(ProducerConfig.BATCH_SIZE_CONFIG,16384);//默认16KBprops.put(ProducerConfig.LINGER_MS_CONFIG,10);//等待10ms以积累更多消息batch.size：批量发送的字节数，
忆雾屿·2025-06-05 07:53

kafka学习笔记（三、消费者Consumer使用教程——配置参数大全及性能调优）

本章主要介绍kafkaconsumer的配置参数及性能调优的点，其kafka的从零开始的安装到生产者，消费者的详解介绍、源码及分析及原理解析请到博主kafka专栏。
Timmer丿·2025-06-05 07:22

1-【源码剖析】kafka核心概念

从今天开始开始在csdn上记录学习的笔记，主要包括以下几个方面：kafkaflinkdorisjava相关：juc、netty本系列笔记主要记录Kafka学习相关的内容。
帅气的小峰·2025-06-05 06:50

Kafka消息队列

目录一：消息队列1.什么是消息队列2.消息队列的特征3.为什么需要消息队列二：Kafka基础与入门1.Kafka基本概念2.Kafka相关术语3.Kafka拓扑架构4.Topic与partition5.
后院那片海·2025-06-04 14:14

TDengine 高级功能——流计算

在传统的时序数据解决方案中，常常需要部署Kafka、Flink等流处理系统，而流处理系统的复杂性，带来了高昂的开发与运维成本。
TDengine （老段）·2025-06-04 11:49

tlmqtt: 基于 Java 的高性能 MQTT Broker 开源项目

项目采用模块化设计，提供认证（文件/数据库/HTTP）、数据桥接（Kafka/MySQL）和存储（内存/Redis）等可扩展组件，支持MQTT和WebSocket双协议接入。具备
qq_36002491·2025-06-04 10:40

Redis最佳实践——秒杀系统设计详解

：库存/订单/支付状态同步用户体验保障：排队机制防止系统雪崩二、系统架构设计（百万级并发）用户端CDN静态资源缓存Nginx集群API网关限流熔断风控校验验证码服务秒杀服务集群RedisClusterKafka
纪元A梦·2025-06-04 08:55

【数据流处理和Apache Kafka】使用Kafka进行实时数据流处理

数据流处理和ApacheKafka：使用Kafka进行实时数据流处理目录引言ApacheKafka简介Kafka的架构Kafka的工作原理Kafka的优缺点Kafka的安装和配置安装Kafka配置Kafka
爱技术的小伙子·2025-06-04 05:34

Kafka简介

Kafka作为一种消息中间件，它是一种分布式的，基于发布/订阅的消息系统。Kafka最初是由LinkedIn开发，用它来跟踪活动数据和运营指标。
moose_killer·2025-06-04 05:03

DeepSeek赋能数据治理解决方案

跨专家知识蒸馏：通过教师-学生框架将不同领域专家的知识迁
公众号：优享智库·2025-06-03 13:10

ELK日志收集之kafka 方案Filebeat + kafka + Logstash + ES + Kibana

一.简介常见的日志采集处理解决方案登录后复制Filebeat+ES+KibanaFilebeat+Logstash+ES+KibanaFilebeat+Kafka/Redis/File/Console+
心上之秋·2025-06-03 02:50

小明的Java面试奇遇之物流中台架构实战：从订单到微服务治理的深度拆解

一、文章标题小明的Java面试奇遇之物流中台架构实战：从高并发订单到微服务治理的深度拆解二、文章标签Java高并发,微服务架构,SpringCloud,分布式事务,Redis缓存,Kafka消息队列,物流中台设计
无处不在的海贼·2025-06-02 21:47

Java后端技术栈问题排查实战：Spring Boot启动慢、Redis缓存击穿与Kafka消费堆积

Java后端技术栈问题排查实战：SpringBoot启动慢、Redis缓存击穿与Kafka消费堆积引言在现代互联网大厂中，Java后端系统因为其复杂性和多样性，常常面临各种问题和挑战。
怡人蝶梦·2025-06-02 20:34

互联网大厂Java面试故事：内容社区与UGC场景下的技术链路剖析（Spring Boot/Kafka/Redis）

互联网大厂Java面试故事：内容社区与UGC场景下的技术链路剖析第一轮：基础技术与业务理解面试官：赵大宝，你好，假如你加入我们内容社区UGC项目，项目基于SpringBoot开发。请问你熟悉SpringBoot的自动配置原理吗？赵大宝：熟，SpringBoot会自动帮我们配好依赖和配置嘛，starter一加，什么都不用动。面试官：说得不错！那你能说说我们社区大量用户并发访问时，Redis是如何帮助
quququ_2138·2025-06-02 20:03

智慧物流场景下Java大厂面试实录：Spring Boot、Kafka、Redis与JVM性能实战解析

智慧物流场景下Java大厂面试实录：SpringBoot、Kafka、Redis与JVM性能实战解析一、故事背景阿特，著名的“水货”程序员，今天来到了国内顶尖智慧物流企业，面试Java开发工程师岗位。
indexsunny·2025-06-02 20:02

【问题处理】Spring Boot中kafka消息能力不足现象及问题解决

【本文首发于个人网址：liumoran.cn】kfaka中主要包含生产者与消费都对象，生产者往队列中推送消息，而消费者则从队列中读取并处理消息。生产者推送的过程较为简单，而对于消费者来说，情况复杂且容易受各种因素影响。1.消费过程消费过程如下所示：CreatedwithRaphaël2.2.0
icarusliu81·2025-06-02 19:02

Java全栈开发求职者真实面试场景还原——从Spring Boot到Vue3的技术实战

全栈开发求职者真实面试场景还原——从SpringBoot到Vue3的技术实战面试基本信息姓名：李明年龄：28岁学历：硕士工作年限：5年技术栈：JavaSE11,SpringBoot,Vue3,Redis,Kafka
杨不易呀·2025-06-02 19:31

如何用Python实现分布式系统架构？

以下是一个分步骤的指南，涵盖核心组件和常用实践：一、核心架构设计原则CAP定理：根据场景选择一致性（C）、可用性（A）、分区容忍性（P）CAP定理应用：金融系统：CP（如Redis）社交媒体：AP（如Kafka
dongno8·2025-06-02 16:34

使用 PySpark 从 Kafka 读取数据流并处理为表

使用PySpark从Kafka读取数据流并处理为表下面是一个完整的指南，展示如何通过PySpark从Kafka消费数据流，并将其处理为可以执行SQL查询的表。
Bug Spray·2025-06-02 03:06

Java大厂面试场景：从Spring Boot到Kafka的技术探讨

Java大厂面试场景：从SpringBoot到Kafka的技术探讨场景介绍毛毛是一名程序员，今天他来到一家互联网大厂面试Java开发岗位。面试官是一位严肃的技术专家，毛毛则以搞笑的方式应对。
yxc2017·2025-06-02 02:30

互联网大厂Java面试：从Spring Boot到Kafka的全方位挑战

场景：互联网大厂Java求职者面试在某知名互联网大厂的办公室内，面试官老王正准备对前来应聘的程序员谢飞机进行技术面试。谢飞机是一个以幽默风趣著称的程序员，他对简单问题能侃侃而谈，而遇到复杂问题则往往“打太极”。第一轮：老王：谢飞机，请你谈谈在SpringBoot中如何实现一个简单的RESTful服务？谢飞机：这个简单！我会使用SpringBoot的注解，比如@RestController和@Req
三个蔡·2025-06-02 02:29

互联网大厂Java面试：从Spring Boot到Kafka的技术之旅

互联网大厂Java面试：从SpringBoot到Kafka的技术之旅场景描述在一家知名互联网大厂的面试室里，面试官老张正襟危坐，准备对前来面试的程序员谢飞机进行一场严肃的技术面试。
谢飞机️·2025-06-02 02:56

Java求职面试：从Spring Boot到Kafka的技术探索

场景：互联网大厂Java求职者面试在一家知名互联网大厂的面试间里，严肃的面试官正准备对搞笑的水货程序员小张进行技术面试。第一轮：核心语言与平台面试官：小张，你好！我们先从Java的基础开始吧。请你讲一讲Java11的新特性。小张：哦，Java11……嗯，增加了var关键字，可以用来声明变量。面试官：不错，var是Java10引入的，不过Java11确实有很多新特性，比如局部变量推断、HttpCli
Elevenmao·2025-06-02 02:56

Java互联网大厂面试：从Spring Boot到Kafka的技术深度探索

Java互联网大厂面试：从SpringBoot到Kafka的技术深度探索在某家互联网大厂的面试中，面试官A是一位技术老兵，而被面试者谢飞机，号称有丰富的Java开发经验。
MyikJ·2025-06-02 02:25

python flink kafka_Flink with Kafka

HowApacheFlinkmanagesKafkaconsumeroffsetsStep1：例子：一个kafkatopic，有两个partition，每个含有"A,B,C,D,E"信息。
嘿bro·2025-06-01 19:40

Python 实现实时数据流处理：Flink 与 Kafka

```htmlPython实现实时数据流处理：Flink与KafkaPython实现实时数据流处理：Flink与Kafka在当今的大数据时代，实时数据流处理变得越来越重要。
光影流年VC·2025-06-01 19:39

ES8生产实践——自定义日志采集(Filebeat方式)

此时可采用传统的Filebeat方式采集日志，引入Kafka作为消息缓冲队列，保证日志传输数据的可靠性和稳定性。
崔亮的博客·2025-06-01 14:33

最新Kafka 常用命令总结

/usr/local/kafka/bin/kafka-topics.sh--create--zookeeperlocalhost:2181/kafka--replication-factor1--partitions1
2401_84585316·2025-06-01 07:12

kafka的零拷贝技术

在Kafka中，高性能数据传输依赖于操作系统提供的零拷贝（Zero-Copy）技术，主要包括sendfile和mmap两种实现方式。
给我个面子中不·2025-06-01 06:36

实时数仓flick+clickhouse启动命令

FlinkCDC环境部署启动flink-yarn模式1、启动zookeeperzk.shstart2、启动DFS，Hadoop集群start-dfs.sh3、启动yarnstart-yarn.sh4、启动kafka
遥遥领先zzl·2025-06-01 06:06

PostgreSQL数据库配置SSL操作说明书

而ES、kafka等也是通过用户名/密码方式连接，但是这些数据重要性相比较于数据库要低一些，毕竟都是一些日志以及消息而已。
不懂说话的猿·2025-06-01 04:21

Kafka核心技术解析与最佳实践指南

ApacheKafka作为分布式流处理平台的核心组件，以其高吞吐、低延迟和可扩展性成为现代数据架构的基石。本文基于Kafka官方文档，深度解析其核心技术原理，并结合实践经验总结关键技巧与最佳实践。
weixin_30777913·2025-05-31 15:49

Kafka 基础教程 — 多线程Consumer实例

作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对
码炫课堂-码哥·2025-05-31 15:18

Kafka多线程Consumer

ApacheKafka作为一款分布式流处理平台，以其高吞吐量和可扩展性在大数据处理领域占据了重要地位。
princeAladdin·2025-05-31 14:15

Debezium系列之：TiCDC同步TiDB数据库数据到Kafka集群使用Debezium数据格式

Debezium系列之：TiCDC同步TiDB数据库数据到Kafka集群使用Debezium数据格式一、使用Debezium消息格式二、Message格式定义DMLEvent数据类型映射Debezium
快乐骑行^_^·2025-05-31 06:47

Java全栈面试实录：从电商系统到AIGC的进阶挑战

小曾（自信）：我做过电商系统，SpringBoot、MyBatis、Redis都用过，支付流程可以用SpringCloudGateway做网关，消息队列用Kafka异步处理订单。
程序员rem·2025-05-31 05:06

深入解析Kafka JVM堆内存：优化策略与监控实践

欢迎莅临我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。推荐：「stormsha的主页」，「stormsha的知识库」持续学习，不断总结，共同进步，为了踏实，做好当下事儿~非常期待和您一起在这个小小的网络世界里共同探索、学习和成长。✨✨欢迎订阅本专栏✨✨TheStart点点关注，收藏不迷路文章目录1.K
stormsha·2025-05-31 02:49

Java中的流处理框架：Kafka Streams与Flink

Java中的流处理框架：KafkaStreams与Flink大家好，我是免费搭建查券返利机器人省钱赚佣金就用微赚淘客系统3.0的小编，也是冬天不穿秋裤，天冷也要风度的程序猿！
省赚客APP开发者@聚娃科技·2025-05-30 20:03

在Spring Boot中实现Kafka动态反序列化：针对多主题的灵活数据处理

引言在分布式系统中，Kafka作为高吞吐量的消息队列，常常需要处理来自不同主题（Topic）的异构数据。不同的业务场景可能要求对同一消费者组内的消息采用不同的反序列化策略。
Debug Your Career·2025-05-30 19:32
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他