MQ~kafka 第6页

消息队列概要讲解（下）

本文不会过多的扩展详细的消息队列系统，如RocketMQ、RabbitMQ、Kafka等，这些会在后续系列文章中详细介绍。

Good Note·2025-02-28 14:49

kafka-web管理工具cmak

一.背景：日常运维工作中，采用cli的方式进行kafka集群的管理，还是比较繁琐的(指令复杂？)。为方便管理，可以选择一些开源的webui工具。推荐使用cmak。

xiao-xiang·2025-02-28 14:49

docker-compose创建kafka支持SASL_PLAINTEXT

#1mkdirconfmkdirconf#2createfilezoo.cfgcat>conf/zoo.cfgconf/server_jaas.conf.envdocker-compose.yml<<-"EOF"name:"P1"version:"3"networks:net:driver:bridgeservices:zookeeper_sasl:image:wurstmeister/zooke

dipherxu·2025-02-28 14:49

最全docker-compose部署kafka、SASL模式(密码校验模式)_system

Client{org.apache.zookeeper.server.auth.DigestLoginModulerequiredusername="admin"password="123456";};Server{org.apache.zookeeper.server.auth.DigestLoginModulerequiredusername="admin"password="123456"u

2401_84182428·2025-02-28 14:17

消息队列（RocketMQ+Kafka）

需解决的问题：消息重复（唯一ID，幂等）消息丢失（ack确认机制，死信队列）消息堆积（增加消费者，增加消费能力，增加集群分担）高可用（集群，主从，多副本）高性能（集群，分区，多机部署，负载均衡）RocketMQ

八千里路云和月laiker·2025-02-28 14:16

美畅物联丨为什么在物联网应用中，通常更倾向于使用 MQTT 而不是 HTTP？

最近，我们的后台收到了许多用户的私信咨询，其中一个问题便是：在物联网（IoT）应用中，为何通常更倾向于使用MQTT而非HTTP呢？今天我们就来探讨一下这个话题。

畅联云平台·2025-02-28 12:38

（七）消息队列-Kafka 序列化avro（传递）

（七）消息队列-Kafka序列化avro（传递）客从远方来，遗我双鲤鱼。呼儿烹鲤鱼，中有尺素书。

平凡君·2025-02-28 12:03

kafka-关于ISR-概述

Kafka中通常每个分区都有多个副本，其中一个副本被选举为Leader，其他副本为Follower。ISR是指与Leader副本保持同步的Follower副本集合。

xiao-xiang·2025-02-28 11:58

第十一章：服务器信道管理模块

目录第一节：模块介绍第二节：通信协议第三节：信道模块实现3-1.类型别名定义3-2.Channel类3-3.ChannelManager类下期预告：该模块在mqserver目录下实现。

转调·2025-02-28 10:53

RabbitMQ系列（零）概要

一、消息队列总览1.什么是消息队列？消息队列（MessageQueue）是一种异步通信机制，允许分布式系统中的服务通过生产-消费模型传递数据。其核心价值在于：解耦性：生产者与消费者无需同时在线或直接交互削峰填谷：应对流量突发场景，避免系统过载（如秒杀系统请求缓冲）可靠性：通过持久化、重试机制保障消息不丢失2.典型应用场景场景实现原理案例服务异步化耗时操作异步执行（如日志记录）用户注册后异步发送通知

yyueshen·2025-02-28 07:21

RabbitMQ工作模式

一、工作模式介绍RabbbitMQ提供了6种工作模式：简单模式、workqueues、Publish/Subscribe发布与订阅模式、Routing路由模式、Topics主题模式、RPC远程调用模式（

霸都阿甘·2025-02-28 07:50

Python—kafka操作

文档结构1、概念简介2、环境搭建3、操作实践1、概念简介2、环境搭建接口手册：https://kafka-python.readthedocs.io/en/master/Python操作kafka的模块为

蓝魔Y·2025-02-28 07:49

python使用kafka原理详解_Python操作Kafka原理及使用详解

Python操作Kafka原理及使用详解一、什么是KafkaKafka是一个分布式流处理系统，流处理系统使它可以像消息队列一样publish或者subscribe消息，分布式提供了容错性，并发处理消息的机制二

形象顧問Aking·2025-02-28 07:19

python调用kafka

先启动hadoop，zookeeper，kafka启动命令hadoop启动命令sbin/start-all.shzookeeper启动命令.

smile__su·2025-02-28 06:47

Spring Boot 集成 Kafka

Kafka作为一种高性能、分布式的消息队列系统，被广泛应用于各种场景。而SpringBoot作为一种流行的Java开发框架，提供了便捷的方式来构建应用程序。

m0_74823471·2025-02-28 06:47

[RabbitMQ] RabbitMQ 工作模式介绍

RabbitMQ是现在很常用的一个消息服务中间件,通过不同类型的交换机(Exchange)和不同的路由键(RoutingKey),可以实现不同分发策略,灵活地将消息分发到不同的队列中去.生产者(Producer

luojbin·2025-02-28 06:45

《RabbitMQ系列教程-第四章-07-RabbitMQ工作模式之Publisher Confirms 模式》_rabbitmq publisher confirms

写在最后在结束之际，我想重申的是，学习并非如攀登险峻高峰，而是如滴水穿石般的持久累积。尤其当我们步入工作岗位之后，持之以恒的学习变得愈发不易，如同在茫茫大海中独自划舟，稍有松懈便可能被巨浪吞噬。然而，对于我们程序员而言，学习是生存之本，是我们在激烈市场竞争中立于不败之地的关键。一旦停止学习，我们便如同逆水行舟，不进则退，终将被时代的洪流所淘汰。因此，不断汲取新知识，不仅是对自己的提升，更是对自己的

2401_84264727·2025-02-28 06:42

python操作kafka

一、参考阿里云的官方链接：使用PythonSDK接入Kafka收发消息_云消息队列Kafka版(Kafka)-阿里云帮助中心二、安装python环境三、添加python依赖库pipinstallconfluent-kafka

您懂我意思吧·2025-02-28 06:41

RabbitMQ实战：构建可靠的异步消息系统

RabbitMQ实战：构建可靠的异步消息系统1.背景介绍1.1异步消息系统的重要性在现代软件系统中,各个组件和服务之间通常需要进行大量的通信和数据交换。同步通信会导致系统耦合度高,可扩展性差。

AI天才研究院·2025-02-28 01:04

第十章：服务器消费者管理模块

目录第一节：代码实现1-1.Consumer类1-2.QueueConsumer类1-3.QueueConsumerManger类第二节：单元测试下期预告：服务器的消费者管理模块在mqserver目录下实现

转调·2025-02-27 20:15

rocketmq-bashboard部署

下载rocketmq可视化界面，源码地址：https://github.com/apache/rocketmq-dashboard修改application.yml配置文件端口为8089和namesrvAddrs

ldlly0505·2025-02-27 12:46

打包rocketmq-dashboard报错问题记录

在进入到\rocketmq-dashboard-2.0.0\rocketmq-dashboard-rocketmq-dashboard-2.0.0目录下，执行mvncleanpackage-Dmaven.test.skip

gooluke·2025-02-27 11:41

docker下载redis,zookeeper,kafka超时time out

林小夕success·2025-02-27 06:01

华为MRS产品组件

MRS提供租户完全可控的一站式企业级大数据集群云服务（全栈大数据平台），轻松运行Hadoop、Spark、HBase、Kafka、Storm等大数据组件。

QianJin_zixuan·2025-02-27 06:59

ELK性能优化实战总结：kafka与rabbitmq

4年经验应该具备哪些技能首先，简单的聊一下我认为的4年经验左右、优秀的Java程序员应该具备的技能有哪些，按“专业技能”和“项目”两块，包括但不限于以下内容。专业技能方面基础：JDK常用类的原理、源码、使用场景。设计模式：常用几种的原理、使用场景，单例、动态代理、模板、责任链等。数据结构：数组、链表、栈、队列、树。网络：TCP、HTTP、HTTPS、负载均衡算法。框架：SpringIoC原理、Sp

m0_56824583·2025-02-27 05:28

集群部署Elasticsearch+Logstash+Kibana+Filebeat+Kafka+Zookeeper

目录引言一、安装Zookeeper步骤1、准备阶段（全部节点操作，以node1为例）（1）关闭防火墙和系统安全机制（全部节点操作，以node1为例）（2）同步时钟源（全部节点操作，以node1为例）（3）JDK的安装（全部节点操作，以node1为例）（4）配置hosts（全部节点操作，以node1为例）2、安装Zookeeper软件包（全部节点操作，以node1为例）3、修改配置文件（全部节点操作

YH746·2025-02-27 05:25

elfk+zookeeper+kafka数据流

申请7台部署elfk+zookeeper+kafka数据流：filebeat(每台app)------>【logstash(2)+kafka(3)】------->logstash(1)--

AustinCien·2025-02-27 05:53

JDBC连接池

1.把对所有Dao类的操作——抽取一个父类抽取：公共的属性、获取连接对象、增删改操作把Dao类中的所有公共内容抽取到一个父类packagecom.zmq.dao;importcom.alibaba.druid.pool.DruidDataSourceFactory

晚安720·2025-02-27 03:42

kafka的ACL配置的sasl.kerberos.principal.to.local.rules配置解释

kafka配置acl认证的用户名转换规则1、Kerberos中的介绍2、自定义saslusername3、自定义ssl的用户名4、关于kafka配置kerberos以及开启acl的实践1、Kerberos

tkgup·2025-02-27 03:35

【spring-kafka】@KafkaListener详解与使用

id监听器的id①.消费者线程命名规则填写:2020-11-1914:24:15c.d.b.k.KafkaListeners120[INFO]线程:Thread[consumer-id5-1-C-1,5

2401_84408092·2025-02-27 02:00

华为全网首发的 Kafka 技术手册，从基础到实战一应俱全，超详细

通过这一部分的学习，你可以学习一下内容：知道Kafka基本原理，了解关键术语概念可以使用Kafka进行消息系统开发通过Java语言来使用Kafka进行消息收发内容涵盖：（特性+使用场景+技术优势+适应人群

2401_83412172·2025-02-27 02:00

kafka小白基础知识

一、Kafka入门（一）Kafka简介Kafka是一个开源的分布式流处理平台，最初由LinkedIn开发，后来贡献给了Apache软件基金会。

小四的快乐生活·2025-02-27 02:29

第十七章：联调测试

目录第一节：生产者客户端第二节：消费者客户端第三节：启动服务器第四节：联调测试1-1.发送/推送消息测试下期预告：第一节：生产者客户端在mqclient创建一个publish.cc的文件，并添加以下内容

转调·2025-02-27 00:12

第十五章：客户端信道管理模块

目录第一节：代码实现1-1.Channel类1-2.ChannelManager下期预告：客户端信道管理模块在mq_client目录下实现。

转调·2025-02-27 00:42

2.部署kafka:9092

官方文档：http://kafka.apache.org/documentation.html(虽然kafka中集成了zookeeper,但还是建议使用独立的zk集群)Kafka3台集群搭建环境：操作系统

AustinCien·2025-02-26 20:43

1.部署zookeeper集群：2181

集群的工作是超过半数才能对外提供服务,成员数量一般为奇数台环境：操作系统:centos7软件版本:zookeeper-3.4.12.tar.gz防火墙：全关三台服务器改主机名：hostnamectlset-hostnamekafka

AustinCien·2025-02-26 20:12

deepseek部署：ELK + Filebeat + Zookeeper + Kafka

##1.概述本文档旨在指导如何在7台机器上部署ELK（Elasticsearch,Logstash,Kibana）堆栈、Filebeat、Zookeeper和Kafka。

AustinCien·2025-02-26 20:12

Ollama微调

FROMq

软件不硬·2025-02-26 19:08

腾讯云 TDMQ 产品家族新成员：消息队列 MQTT 版全新发布！

导语自2024年12月27日起，腾讯云消息队列团队正式发布TDMQ产品家族的新成员：TDMQMQTT版。

·2025-02-26 19:27

MQX - 基于 MySQL 的轻量级消息队列

MQX是一个基于MySQL的轻量级消息队列实现，以Go语言库的形式提供服务，无需额外部署消息服务器。

·2025-02-26 19:56

Apache BookKeeper 一致性协议解析

背景Pulsar相对于Kafka根本的区别在于数据一致性协议，这也是为什么Pulsar可以做到

·2025-02-26 19:54

【腾讯云中间件】2023年热门文章集锦

在过去的一年里，我们见证了腾讯云中间件在产品升级与创新方面的显著进步，包括消息队列TDMQ品牌全新升级和新产品发布，微服务引擎升级与异地多活单元化能力发布等。

·2025-02-26 19:23

在淘客返利系统中使用Kafka实现事件驱动架构

在淘客返利系统中使用Kafka实现事件驱动架构大家好，我是微赚淘客系统3.0的小编，是个冬天不穿秋裤，天冷也要风度的程序猿！

宝术·2025-02-26 18:28

如何使用Kafka构建事件驱动的架构

如何使用Kafka构建事件驱动的架构了解ApacheKafka的基础概念设计事件驱动架构的基本原则使用Kafka进行事件流处理的优势构建事件驱动微服务的最佳实践安全性考量与最佳实践扩展性和性能优化技巧实际案例分析

master_chenchengg·2025-02-26 17:51

【Python爬虫(82)】开启物联网数据爬取之旅

目录一、物联网设备通信协议1.1MQTT协议详解1.2CoAP协议探秘

奔跑吧邓邓子·2025-02-26 15:37

探秘MoonMQ：一款高速分布式消息队列系统

探秘MoonMQ：一款高速分布式消息队列系统moonmqafastdistributedmessagequeueimplementedwithgo项目地址:https://gitcode.com/gh_mirrors

蒙丁啸Sharp·2025-02-26 14:32

组态软件在物联网中的应用概述

3.系统集成组态软件支持多种通信协议（如MQTT、OPCUA等），能够集成不同厂商的设备，实现统一

web组态软件·2025-02-26 13:19

消息中间件 --- Apache Pulsar

ApachePulsar在拉卡拉的技术实践_开源_ApachePulsar_InfoQ写作社区场景1：流式队列场景2：消息队列：OpenMessaging协议实现（透明层协议）场景3：流式队列：自定义Kafka0.8

johnrui·2025-02-26 11:11

Kafka 基础教程 — 可靠的数据传递

作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对

码炫课堂-码哥·2025-02-26 10:33

rabbitmq 同步策略_数据同步解决方案-canal与rabbitmq

OkHttpClient的基本使用方法能够完成商品上架索引库导入数据功能，能够画出流程图和说出实现思路能够完成商品下架索引库删除数据功能，能够画出流程图和说出实现思路该工程使用lua+nginx+rabbitmq

weixin_39996739·2025-02-26 08:51

推荐频道

MQ~kafka