消息系统

Kafka 之详解(Detailed Explanation of Kafka）

一、Kafka简介ApacheKafka是一款分布式发布-订阅消息系统，由LinkedIn公司在2010年贡献给Apache基金会，并成为顶级开源项目。

Linux运维老纪·2025-02-02 03:36

最新性能测试:Kafka、Pulsar 和 Pravega 哪个最强?

Pulsar和Kafka最初都被作为优秀的消息系统而为人熟知，但它们最近都做出了很大努力向存储系统方向发展，这两个系统最近都新增了分层存储的特性。

起码有故事·2025-02-01 23:40

互联网大厂的微服务架构系统应对超大流量解决方案

数据库连接池、线程池等等）限制瞬时并发数（如Nginx的limit_conn模块）限制时间窗口的平均速率（如Guava的RateLimiter、Nginx的limit_req模块）限制远程接口的调用速率、限制消息系统的消费速率

欧子说Java·2025-02-01 00:03

Kafka原理总结

Kafka是一个开源的分布式流式处理平台，在这个平台上可以发布、订阅以及处理数据流，具有强大的吞吐能力，让Kafka成为了一个高性能的发布与订阅消息系统一：概念理解Broker部署Kafka进程的服务被称之为

DEMOAHUI·2025-01-30 10:08

kafka 生产者发送流程

Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。

jxj_cd·2025-01-26 19:30

分布式微服务系统架构第87集：kafka

Kafka就是为了解决上述问题而设计的一款基于发布与订阅的消息系统。它一般被称为“分布式提交日志”或者“分布式流平台”。

掘金-我是哪吒·2025-01-25 00:55

k8s部署Kafka集群

1.1、Kafka(消息队列)是一个分布式消息中间件,支持分区的、多副本的、多订阅者的、基于zookeeper协调的分布式消息系统。

潞哥的博客·2025-01-21 10:38

RocketMQ原理解析

使用RocketMQ可以轻松地构建分布式、高可用性的消息系统，并可以快速响应业务需求和处理海量数据。

Luxangn·2025-01-17 10:04

大数据框架之kafka详解

2Kafka的消息系统语义3Kafka生产过程分析3.1写入方式3.2分区（Partition）3.3副本（Replication）3.4Producer写入流程3.5消费者组3.6消费方式扩展：纠删码技术

xingchensuiyue·2025-01-17 06:30

Spring Boot教程之五十七：在 Apache Kafka 上发布 JSON 消息

SpringBoot|如何在ApacheKafka上发布JSON消息ApacheKafka是一个发布-订阅消息系统。消息队列允许您在进程、应用程序和服务器之间发送消息。

潜洋·2025-01-17 03:33

消息总线RabbitMQ

RabbitMQ是实现了高级消息队列协议（AMQP）的开源消息代理软件，也称为面向消息的中间件，是一个在AMQP基础上完整的，可复用的企业消息系统。

Crystalqy·2024-09-12 17:15

Kafka是如何实现高性能的

由于磁盘有限，不可能保存所有数据，实际上作为消息系统Kafka也没必要保存所有数据，需要删除旧的数据。而这个删除过程，并非通过使用“读-写”模式去修改

明斯克开源·2024-09-09 04:19

第五章 Kafka 构建TB级异步消息系统

第五章Kafka构建TB级异步消息系统1、阻塞队列模拟阻塞队列publicclassBlockingQueueTest{publicstaticvoidmain(String[]args){//容量为10

跟风。·2024-09-07 13:48

Kafka，构建TB级异步消息系统

1.阻塞队列BlockingQueue解决线程通信的问题阻塞方法：put、take。生产者消费者模式生产者：产生数据的线程消费者：使用数据的线程实现类ArrayBlockingQueueLinkedBlockingQueuePriorityBlockingQueue、SynchronousQueue、DelayQueue等2.Kafka入门Kafka简介Kafka是一个分布式的流媒体平台应用：消息

Fern977·2024-09-07 12:15

仿论坛项目--Kafka，构建TB级异步消息系统

阻塞队列•BlockingQueue解决线程通信的问题。阻塞方法：put、take。•生产者消费者模式生产者：产生数据的线程。消费者：使用数据的线程。•实现类ArrayBlockingQueueLinkedBlockingQueuePriorityBlockingQueue、SynchronousQueue、DelayQueue等。Kafka入门•Kafka简介Kafka是一个分布式的流媒体平台。

HUT_Tyne265·2024-09-07 12:14

大数据系列 | Kafka架构分析及应用

大数据系列|Kafka架构分析及应用1.消息系统介绍2.Kafka原理分析3.Kafka架构分析4.Kafka的安装与配置4.1.Zookeeper集群安装配置4.2.安装Kafka集群4.3.配置kafka

降世神童·2024-09-07 07:42

springboot整合kafka

Kafka是一个分布式的发布-订阅消息系统，它可以处理大量数据并提供高吞吐量。在本教程中，我们将使用SpringBoot2.7.2和Kafka2.8.1。

##明天·2024-09-05 15:42

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。

kuuuugua·2024-09-05 15:41

kafka集群搭建

Kafka集群搭建一、概念说明它是一个分布式消息系统，由linkedin使用scala编写，用作LinkedIn的活动流（ActivityStream）和运营数据处理管道（Pipeline）的基础。

java皮皮虫·2024-09-04 16:48

消息中间件：深入理解 Kafka的消息顺序和一致性、可靠性和高可用性第1版

作为高吞吐量、低延迟、强扩展性和高容错的消息系统，Kafka在各种场景中都表现出了卓越的性能。本文将深入探讨Kafka的适用场景、消息顺序与一致性保证、高可用性机制等关键知识点。

upgrador·2024-09-01 09:00

Kafka入门：从零开始了解分布式流处理平台

什么是KafkaApacheKafka是由LinkedIn公司开发，后来由Apache软件基金会维护的一个分布式、分区、多副本的基于ZooKeeper协调的分布式消息系统。

犬余·2024-08-31 19:34

RabbitMQ 性能优化

3.并发处理的示例4.详细说明高效管理连接和通道，避免资源浪费2.1.连接池的使用2.2.通道的复用2.3.控制连接和通道的数量心跳机制的配置前言在实际的生产环境中，RabbitMQ的性能优化对于确保消息系统的稳定性和高效性至关重要

StaticKing·2024-08-29 18:10

kafka认识篇，java程序员面试笔试真题库

在此基础上，部分消息系统提供了一个”只送达一次”保证。无论有多少进程

m0_64204730·2024-08-28 19:35

Kafka命令详解：从零开始，掌握Kafka集群管理、主题操作与监控的全方位技能，理解每一条命令背后的逻辑与最佳实践

长风清留扬·2024-08-27 16:37

消息中间件：Kafka消息丢失与堆积问题分析与解决方案

消息中间件：Kafka消息丢失与堆积问题分析与解决方案Kafka作为分布式消息系统，广泛应用于实时数据流处理、大数据分析等领域。

upgrador·2024-08-24 02:02

zookeeper+kafka消息队列群集部署

一、消息队列1.消息队列消息是应用间传送的数据消息队列是应用见的通信方式，消息发送后立即返回，由消息系统确保消息可靠传递。

这是九月·2024-08-22 00:54

1分钟玩转Kafka

Kafka是一种分布式的、基于发布/订阅的消息系统，其极致体验让人欲罢不能，但操心的运维、复杂的安全策略、可靠性易用性的缺失、算不上极致的性能发挥、并不丰富的消息服务功能，仍需要使用者付出诸多的背后工作

中间件小哥·2024-03-10 21:58

消息中间件：Puslar、Kafka、RabbigMQ、ActiveMQ

以下是提到的几种消息中间件的概述：Pulsar：Pulsar是一个由Apache软件基金会管理的开源分布式发布-订阅消息系统。

MarkHD·2024-02-20 17:08

想弄明白Kafka到底是什么吗？看完这篇你就知道了！(概念、数据存储、生产者、消费者)

一.Kafka1.1.Kafka概念Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统，最初由LinkedIn公司开发，使用Scala语言编写，目前是Apache的开源项目。

套马杆的程序员·2024-02-20 13:52

Kafka核心逻辑介绍 | 京东云技术团队

1、概念Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica）分布式消息系统（kafka2.8.0版本之后接触了对zk的依赖，使用自己的kRaft

·2024-02-20 11:54

MessageQueue --- RabbitMQ

RabbitMQRabbitMQIntroRabbitMQ核心概念RabbitMQ分发类型Deadletter(死信)保证消息的可靠传递RabbitMQIntro2007年发布，是一个在AMQP（高级消息队列协议）基础上完成的，可复用的企业消息系统

马达加斯加D·2024-02-20 10:28

Kafka的介绍

文章目录一、介绍二、消息队列通信的模式三、特性四、使用场景五、核心概念一、介绍kafka是一个分布式的发布订阅消息系统基于Zookeeper协调最初由Linkedin公司开发，于2010年贡献给了Apache

kimi-001·2024-02-20 07:45

kafka-面试题

消息队列如何保证消息可靠性消息不重复生产者控制消费者幂等消息不丢失生产者发送，要确认broker收到并持久化broker确认消费者消费完，再删除消息2、kafka是什么Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统

HBryce24·2024-02-19 22:08

RabbitMQ的高可用机制

RabbitMQ通过多种机制提供高可用性(HA)支持，以确保消息系统的稳定性和可靠性。下面将详细介绍这些机制，并提供代码示例。

辞暮尔尔-烟火年年·2024-02-19 14:37

Kafka初探

fr=aladdinKafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。Kafka是一种高吞吐量的分布式发布订阅消息系统，有如下特性

萌凉258·2024-02-14 13:41

金融科技力

可用性最重要的点：保密性零知识证明：1、完整性（真的假不了）2、可靠性（假的真不了）3、零知识性（知道真的，但是不需要知道内容）共识算法安全：抗崩溃性与容错性确定性终结与概率终结FLP不可能性：在完全异步消息系统中如果单个节点发生故障

nightluo·2024-02-13 01:20

消息中间件介绍

消息队列有入队（生产者）和出队（消费者）使用原因：解耦消息系统在处理过程中间插入了一个隐含的、基于数据的接口层，两边的处理过程都要实现这一接口。

xmh-sxh-1314·2024-02-12 23:47

Kafka概念和基本架构

主要应用场景是：日志收集系统和消息系统。Kafka主要设计目标如下：以时间复杂度为O(

悠然予夏·2024-02-11 12:38

kafka基本概念

Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以收集并处理用户在网站中的所有动作流数据以及物联网设备的采样信息。

L.S.V.·2024-02-11 12:38

Kafka 概念，安装，常用命令（一）

Kafka有点像消息系统，允许发布和订阅消息流，但是它和传统的消息系统有很大的差异，首先，Kafka是个现代分布式系统，以集群的方式运行，可以自由伸缩。

响彻天堂丶·2024-02-11 12:06

Java面试题之：Kafka 概念

Java面试题之：Kafka概念Kafka概念Kafka概念 Kafka是一种高吞吐量、分布式、基于发布/订阅的消息系统，最初由LinkedIn公司开发，使用Scala语言编写，目前是Apache的开源项目

faramita_of_mine·2024-02-11 12:06

RabbitMQ

MQ衡量指标：服务性能、数据存储、集群架构二、KafkaKafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache顶级项

~Maple~·2024-02-11 06:05

第七篇——Apache Kafka的设计与实现

Apache软件基金会推出的一个开源分布式流处理平台，它最初由LinkedIn开发并于2011年9月正式发布，目前已成为Apache项目之一，是一个基于发布-订阅模式的分布式、高吞吐量、可容错、高可靠的消息系统

禅与计算机程序设计艺术·2024-02-10 06:23

初识kafka

[TOC]Kafka起初是由Linkedin公司采用Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统，现己被捐献给Apache基金会。

tracy_668·2024-02-09 14:07

腾讯AI大佬详解Apache Kafka实战

内容简介1.ApacheKafka简介：ApacheKafka是由Apache软件基金会开发的一个开源消息系统项目，由Scala写成。Kafka最初是由LinkedIn开发，并于2011年初开源。

笑起来真好看LQQ·2024-02-09 08:53

Kafka 入门介绍

4.3.异地数据同步技术（Geo-Replication）4.4.生产者（Producers）4.5.消费者（Consumers）4.6.Kafka的保证（Guarantees）4.7.Kafka作为一个消息系统

流华追梦·2024-02-09 00:43

Redis使用详细教程

gurlan·2024-02-08 19:31

玩转RabbitMq

(两类):1.JMS组件:ActiveMq(慢)2.AMQP组件:协议组件(性能高):两个主要的开源项目|-RabbitMq==>速度快(十年加的一款产品)|-Kafka==>大数据时代产物,明日之星消息系统组成成分

dreamer_0137·2024-02-07 21:51

Kafka整理

常用消息中间件对比Kafka是LinkedIn开源的分布式发布-订阅消息系统，目前归属于Apache定级项目。

瑜骐·2024-02-07 19:08

Spring Boot整合Kafka

Kafka是一个分布式的、可分区的、可复制的消息系统，下面是Kafka的几个基本术语：Kafka将消息以topic为单位进行归纳；将向Kafkatopic发布消息的程序成为producers；将预订topics

一只倔强的蜗牛·2024-02-07 03:56

推荐频道