Broker 第15页

3. Kafka Producer

如果设置成异步的模式，可以运行生产者以batch的形式push数据，这样会极大的提高broker的性能，但是这样会增加丢失数据

西部小笼包·2023-12-05 10:39

Window下的RocketMQ踩坑记录

3、修改RocketMQ配置3.1、修改rocketmq-all-4.9.1-bin-release\conf下的broker.conf#LicensedtotheApacheSoftwareFound

zzm_fengye·2023-12-05 00:10

SpringBoot 使用RocketMQ踩坑经历

一、使用JDK11需要修改配置runbroker.cmdifnotexist"%JAVA_HOME%\bin\java.exe"echoPleasesettheJAVA_HOMEvariableinyourenvironment

zengzhenkun·2023-12-05 00:39

SpringCloudStream集成Rocketmq踩坑笔记

2、com.alibaba.rocketmq.client.exception.MQBrokerException:CODE:14DESC:servicenotava

Dragon Wu·2023-12-05 00:38

Linux远程服务器rocketMQ踩坑记录！！！

一部署阶段1.启动命令nameServer启动:nohupshbin/mqnamesrv-nip地址:9876&broker启动:nohupshbin/mqbroker-nip地址:9876autoCreateTopicEnable

qq_34617458·2023-12-05 00:36

关于rocketMQ踩坑的那些事

org.apache.rocketmq.client.exception.MQClientException:Send[3]times,stillfailed,cost[66]ms,Topic:topic,BrokersSent

crisp制药·2023-12-05 00:34

大数据开发：Kafka消息存储到Broker的流程

今天的大数据开发学习分享，我们就主要来讲讲Kafka消息存储到Broker的流程。

成都加米谷大数据·2023-12-04 23:34

消息队列（六）：服务器设计

推送给消费者消息的基本实现思路让brokerServer把哪些消费者管理好收到对应的消息，把消息推送给消费者消费者是以队列为维度来订阅消息的，一个队列可以有多个消费者（此处我们约定按照轮询的方式来进行消费

我可是ikun啊·2023-12-04 17:55

The moon and sixpence Day 3

主人公通过MissWaterford认识了作家mrs.Strickland一位特别的作家，单纯有艺术追求，她的丈夫却是对文学无感的股票经理人stockbroker

milaji·2023-12-04 13:59

28 主题管理

1.如何删除主题执行kafka-topics脚本，删除操作是异步的，执行完脚本只是把主题标记为已删除2.删除主题失败可能原因：副本所在broker宕机了待删除主题的部分分区还在迁移解决方法：手动删除zk

ZyyIsPig·2023-12-04 08:09

29 kafka动态配置

为什么需要动态配置线上运行的kafkabroker修改配置需要重启的话，影响比较大。

ZyyIsPig·2023-12-04 08:06

RocketMQ消息丢失解决方案：同步刷盘+手动提交

因为虽然我们解决了生产者发送消息时候的消息丢失问题，但也只是保证Broker正确的接收到了消息，实际上接收到的消息会保存在oscache中，如果此时broker机器突然宕机，oscache中的消息数据就丢失掉了

HUC王子·2023-12-04 08:06

kafka简介

特点高吞吐量：单机每秒几百MB的读写消息持久化高扩展性高可靠性支持多消费者（这个是比较重要的特点）拓扑结构Broker：Kafka集群包含一个或多个服务器，这种服务器被称为brokerProducer:

码蹄疾·2023-12-04 07:25

RocketMQ源码详解 | Broker篇 · 其一：线程模型与接收链路

概述在上一节RocketMQ源码详解|Producer篇·其二：消息组成、发送链路中，我们终于将消息发送出了Producer，在短暂的tcp握手后，很快它就会进入目的Broker。

面向bug，春暖花开·2023-12-04 02:51

C#使用MQTT通信 .Net实现MQTT通信 java使用MQTT通信 java实现MQTT通信 MQTT发送、订阅

以下是使用MQTT进行通信的一些基本概念：BrokerMQTT通信中的中间件，负责接收发布者发布的消息并将其传递给订阅者。

weijia3624·2023-12-04 00:23

C# 实现MQTT通讯

MQTTnet4.2.1.781背景MCU加4G模组要测试MQTT通讯，和功能开发，为方便自己调试，写了个小工具做简单命令首发MQTT连接MCU肯定是作为客户端client，项目中已经搭建好了MQTTBroker

柿子风年·2023-12-04 00:22

Kafka 集群增加节点（Broker）

背景：原集群三台主机节点，由于业务增长迅速，现需扩容三台节点，增加至六节点集群；原三台Zookeeper节点无需扩容。初始化新节点准备三台新节点，分别安装相同版本kafka应用，并复制原集群配置进行修改。启动三台节点观察是否加入集群成功。迁移topic分区查看topic在哪些分区上sh./kafka-topics.sh--describe--topicdemo--bootstrap-server1

天空海阔linan·2023-12-03 23:38

Celery

Celery是一个基于python开发的分布式异步消息队列Celery的架构由三部分组成，消息中间件（messagebroker）,任务执行单元（worker）和任务执行结果存储（taskresultstore

Strict Flora·2023-12-03 22:04

Kafka Eagle 可视化工具简单介绍

KafkaEagle可视化工具作用：监控Broker、Topic、Consumer、Cluster、Zookeeper、ConsumerGroups、Metrics（指标统计）等相关信息。

笔头还没烂·2023-12-03 21:37

MQTT客户端、代理（broker）和连接建立

接下来，将深入MQTT的世界，介绍MQTT代理（broker）和MQTT的连接

雨打夏夜·2023-12-03 16:48

MQTT 基础 P1 -- MQTT是什么 && publish/subscribe

MQTTPart1后面还有几个part讲详细的介绍we’llexplorethebasicconcepts(publish/subscribe,client/broker)andbasicfunctionality

...xiexiaohan·2023-12-03 16:47

Windows实现Mqtt订阅和发布，最新教程，细到极致

一个轻量级的，基于tcp传输层的应用层协议，它是轻量级的，相比于websocket来说，然后我这里就用人话大致说下它的工作过程：相当于是张三要给李四、王五发送消息，但是李四、王五不能当前发送，需要一个wx群（broker

Jesscia ^_^·2023-12-03 16:16

MQ——RabbitMQ概念

RabbitMQRabbitMQ的概念四大核心概念生产者交换机队列消费者RabbitMQ六种方式名词介绍BrokerVirtualhostConnectionChannelExchangeQueueBindingRabbitMQ

~^~^·2023-12-03 13:06

Kafka常用术语

名词解释Broker节点：一个Kafka节点就是一个Broker，一个和多个Broker可以组成一个Kafka集群Topic主题：Kafka根据Topic对消息进行归类，发布到Kafka集群的每套消息都需要指定一个

xuxigifxfh·2023-12-03 09:48

RocketMQ事务消息源码解析

一.概述半事务消息：指的是发送至broker但是还没被commit的消息，在半事务消息被确认之前都是无法被消费者消费的。

听到微笑·2023-12-03 08:38

RocketMQ阅读源码前的准备

本文将讲解如何在IDEA中导入RocketMQ源码，并运行Broker和NameServer，编写一个消息发送与消息消费的示例。

听到微笑·2023-12-03 08:05

RocketMQ消息过滤机制源码详解

#RocketMQ提供了2种消息过滤的方式：TAG过滤SQL92过滤SQL过滤默认是没有打开的，如果想要支持，必须在broker的配置文件中设置：enablePropertyFilter=true一.示例代码

听到微笑·2023-12-03 07:42

什么是消息队列？

代理：Broker主要的处理单元，负责消息的存储、投递、及

武昌库里写JAVA·2023-12-03 05:26

Kafka-12.设计-配额

Kafka集群能够对请求实施配额，以控制客户端使用的broker资源。

悠扬前奏·2023-12-03 04:40

关于MQTT协议与QT的结合【保姆级的操作手册一】

2.MQTT的好处：实现远程传感器和控制设备而设计的协议3.MQTT的三种角色：发布者（Publish）、代理（Broker）（服务器）、订阅者（Subscri

Duffy_Gallagher·2023-12-03 03:52

centos7 安装配置emqx

语言开发的MQ消息服务器，安装前先安装erlang环境支持yuminstallerlang-y1、下载[root@testsrc]#wget-chttps://www.emqx.cn/downloads/broker

oToyix·2023-12-02 22:26

rocketmq容器化部署

1.1.创建数据目录mkdir-p/data/rocketmq/{broker,dashboard,namesrv}cd/data/rocketmq/brokermkdirconflogsstorecd

Winter Liu·2023-12-02 21:43

Kafka详解（中）——Kafka客户端操作

脚本名称用途描述connect-distributed.sh连接kafka集群模式connect-standalone.sh连接kafka单机模式kafka-acls.sh设置Kafka权限kafka-broker-api-versions.sh

98seven·2023-12-02 13:30

RocketMQ集群搭建

环境：两台虚拟机，java环境，mvn虚拟机1启动一个nameserver+1个broker。虚拟机2启动一个broker。

运动书生·2023-12-02 13:34

【kafka实践】09｜消费者位移

这使得KafkaBroker不需要保存位移数据，减少了Broker端需要

叁戒·2023-12-02 12:41

Doris 数据导入一：Broker Load 方式

其中Brokerload还支持parquet和orc数据格式。1）

shangjg3·2023-12-02 10:18

2023_Spark_实验二十四：Kafka集群环境搭建

Kafka集群环境搭建一、环境说明二、安装步骤一、环境说明目前的Kafka版本还是需要借助zookeeper来存储cluster、brokers、consumer等相关元信息，在当前版本即在本案例中，我们采用了外部的

pblh123·2023-12-02 10:44

RocketMQ：搭建集群

Broker部署相对复杂，Broker分为Master与Slave，一个Master可以对应多个Slave，但是一个Slave只能对应一个Master，Master与Slave的对应关系通过指定相同的Br

Anbang713·2023-12-02 09:11

三、架构设计

Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递，投递的过程支持快速失败并且低延迟。Consumer：消息消费的角色，支持分布式集群方式部署。

放开那个BUG·2023-12-02 01:06

中国平安蝉联MSCI-ESG评级“A“级保持“综合保险及经纪”类别亚太区第一位

中国平安凭借在ESG方面的优异管理表现，连续第二年获得A级评级，保持"综合保险及经纪"（Multi-LineInsurance&Brokerage）类别亚太区第一位。

lsrsyx·2023-12-01 19:25

kafka 控制台发送和消费测试

#进入安装目录cd/export/app/kafka_2.11-0.10.2.1#生产：bin/kafka-console-producer.sh--broker-list10.86.0.106:9092

玩玩风行啦·2023-12-01 16:15

rocketmq 集群环境部署及与spring cloud 集成

1下载zip安装包rocketmq-all-5.1.4-bin-release.zip2修改启动配置，防止默认内存配置过高runserver.sh/runbroker.sh/tools.sh3启动namesrvnohupshbin

XT4625·2023-12-01 09:41

2018-11-28

anopensource(BSDlicensed),in-memorydatastructurestore,usedasadatabase,cacheandmessagebrokerO

Donley828·2023-12-01 08:38

Rocketmq架构

Rocketmqnamesrv源码分析-CSDN博客Broker：消息中转角色，负责存储消息、转发消息。

我不是攻城狮·2023-12-01 04:03

大厂五剑客之RocketMQ---6--RocketMQ生产者---二周目

2.投递到broker失败重新发送。3.最大消息的大小。4.主题下队列的数量。5.是否自动创建，生产环境要设置为false。7.consumer订阅topic可以配置为组，生产环境建议关闭。

nzch·2023-11-30 22:02

【RocketMQ 二十】RocketMQ应用之延时消息

1什么是延时消息当消息写入到Broker后，在指定的时长后才可被消费处理的消息，称为延时消息。采用RocketMQ的延时消息可以实现定时任务的功能，而无需使用定时器。

冒菜MaoCai·2023-11-30 22:02

RocketMQ入门实战

二.基础实战启动mq1.先启动namespace2.启动broker3。下载一个rocket-console。

微醺尔尔·2023-11-30 22:29

电商营销场景的RocketMQ实战01-RocketMQ原理

架构图Broker主从架构与集群模式RocketMQ原理深入剖析Broker主从架构原理HAConnection与HAClientBroker基于raft协议的主从架构Consumer运行原理基础知识001

每天的每一天·2023-11-30 22:27

python测试开发django-159.Celery 异步与 RabbitMQ 环境搭建

Celerycelery的5个角色Task就是任务，有异步任务(AsyncTask)和定时任务(CeleryBeat)Broker中间人，接收生产者发来的消息即Task，将任务

上海-悠悠·2023-11-30 20:39

Kafka如何保证数据的可靠性&Kafka集群

Kafka可以支持高吞吐量的原因四、Kafka选举策略什么是ISR什么是LEO、LSO、HW、LW数据更新过程Follwer同步数据分区Leader故障转移&选举策略一、Kafka数据存储方式名词解释Broker

熟透的蜗牛·2023-11-30 20:24

推荐频道

Broker