Broker

Words book

Phraseinfullviewofsb.Explain:sothatallthepeopleinaplacecansee,especiallywhenthisisembarrassingorshockingReporterWhoBrokeR.KellyStory
sharyyy·2023-10-23 20:26

Adjusted frame length exceeds 1677216:16777318-discarded

问题背景消息队列的nameser和broker运行后，在console无法显示，进入broker.log，namesrv.log显示如下报错Adjustedframelengthexceeds1677216
冰川_·2023-10-23 16:58

一些kafka的面试题

为单位进行归纳将向Kafkatopic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一一个或多个服务组成，每个服务叫做一个broker.producers
农哥小鹏·2023-10-23 16:38

k8s添加自定义DNS解析

1、需要要添加的自定义解析10.0.21.22rocketmq-brokeras10.0.21.21rocketmq-brokerbs10.0.21.20rocketmq-brokera10.0.21.25rocketmq-brokerbpingrocketmq-brokeras
奔跑的大白兔·2023-10-23 13:43

大数据日志传输之Kafka实战教程

大数据日志传输之Kafka实战本套课程围绕Kafka架构详细讲解kafka的核心架构组件,broker,consumer,producer,以及日志的分段存储,稀疏索引,副本平衡,重分区,数据同步,Kafka
weixin_34279184·2023-10-23 07:53

KafKa 分区，副本实战

一主多从5个broker(1主4从)安装目路/config/server.properties,额外复制4份为server-2.properties，server-3.properties，server
大头河·2023-10-23 05:38

kafka分区副本机制

副本处于不同的broker中，当leader副本出现故障时，从follower副本中重新选举新的leader副本对外
波波仔86·2023-10-23 05:07

MicroPython的MQTT实现（asyncio协程版）

micropython/micropython-lib/tree/master/umqtt.simple二、免费MQTT测试服务器https://www.emqx.cn/mqtt/public-mqtt5-brokerhttps
鲲鹏混子鱼·2023-10-23 03:27

Connection to node 0 (windows10.microdone.cn/192.168.1.4:9092) could not be established.

Windows下Kafka报错：Connectiontonode0(windows10.microdone.cn/192.168.1.4:9092)couldnotbeestablished.Brokermaynotbeavailable
yeeanna·2023-10-23 02:51

linux 下搭建rokectMQ集群

https://github.com/alibaba/RocketMQ/releases/tag/v3.4.6用三台机器搭建集群，3namesrv、3master、3slave：ip1nameSrv1broker-abroker-c-sip2nameSrv2broker-a-sbroker-bip3nameSrv3broker-b-sbroker-c
逃离魔爪·2023-10-22 22:30

RocketMQ NameServer 原理分析

NameServer中维护着Producer集群、Broker集群、Consumer集群的服务状态。通过定时发送心跳数据包进行维护更新各个服务的状态。当有新的Producer加入集群时，通过上报
jijs·2023-10-22 15:49

Kafka Consumer开发

一个或多个消费者订阅kafka集群中的topic，并从broker接收topic消息，从而进行业务处理。今天来学习下kafkaconsumer基本使用。
u013433591·2023-10-22 15:11

kafka框架

14057057kafka概述消息队列的两种模式1）点对点模式（一对一，消费者主动拉取数据，消息收到后消息清除）2）发布/订阅模式（一对多，消费者消费数据之后不会清除消息）（1）Producer：消息生产者，就是向kafkabroker
DSJ_ kohler·2023-10-22 13:23

大数据之Kafka介绍及使用

Kafka的架构Kafka的架构由以下几个组件组成：Broker：Kafka集群中的每个节点都是一个Broker，它们负责接收和处理消息。Topic：
蓝胖子的宝贝·2023-10-22 10:48

大数据技术之Kafka

传统消息队列的应用场景1.2.2消息队列的两种模式1.3Kafka基础架构第2章Kafka生产者2.1生产者消息发送流程2.2生产者分区2.3生产者发送消息的分区策略2.4数据可靠性（去重）第3章KafkaBroker3.1KafkaBroker
Red-P·2023-10-22 10:16

RocketMQ消息丢失解决方案：同步刷盘+手动提交

因为虽然我们解决了生产者发送消息时候的消息丢失问题，但也只是保证Broker正确的接收到了消息，实际上接收到的消息会保存在oscache中，如果此时broker机器突然宕机，oscache中的消息数据就丢失掉了
H-U-C王子·2023-10-22 10:49

springboot集成rocketmq，实现普通消息、顺序消息、延迟消息、事物消息

安装：RocketMQ详细安装教程（RocketMQ安装、RocketMQ修改默认端口、console管理后台安装）_Xd聊架构的博客-CSDN博客1.broker.conf配置brokerClusterName
晨一更·2023-10-22 10:46

基于 Docker 安装 RocketMQ

注意：启动RocketMQServer+Broker+Console至少需要2G内存docker-compose.ymlversion:'3.5'services:rmqnamesrv:image:foxiswho
isuntong·2023-10-22 09:38

Kafka的分区模型

kafka集群由多个消息代理服务器（brokerserver）组成，发布到kafka集群的每条消息都有一个类别（topic）。
挽袖清风_32dc·2023-10-22 06:07

常用消息中间件

同时实现了Broker架构，核心思想是生产者不会将消息直接发送给队列，消息在发送给客户端时先在中心队列排队。对路由(Routing)，负载均衡(
xmh-sxh-1314·2023-10-22 03:45

如何用工业树莓派和MQTT平台打通OT和IT？

宏集HiveMQ将PC端配置为MQTTBroker；工业树莓派可通过MQTT协
宏集科技工业物联网·2023-10-21 12:30

IM - 核心功能之分布式部署方案

（RabbitMQ集群对带宽的依赖程度，尚未明确，需要测试）因此，引入Broker，解决跨
红薯爱帅·2023-10-21 11:44

消息中间件-RocketMq

windows下安装安装下载下载地址：http://rocketmq.apache.org/release_notes/release-notes-4.2.0/安装参考1安装参考2安装控制台启动运行如果broker
Adda_Chen·2023-10-21 08:06

Kafka MS题总结

对于Kafka的Broker而言，Kafka的复制机制和分区的多副本架构是Kafka可靠性保证的核心Kafka如何保证生产一次性语义？
hehehehe·2023-10-20 18:55

Apache Pulsar 2.9.1单集群部署

并运行Function(可选)8.分发apache-pulsar-2.9.1(pulsar1上)9.初始化集群元数据(pulsar1)10.运行(3台服务器)10.1启动Bookeeper10.2启动broker1
Bulut0907·2023-10-20 17:22

Pulsar Manager和dashboard部署和启用认证

可用于管理和监测租户、命名空间、topic、订阅、broker、集群等。Pulsardashboard目前已被弃用Linu
beyond阿亮·2023-10-20 17:51

Pulsar集群和PulsarManager添加JWT认证

Pulsar集群和PulsarManager添加JWT认证一、Pulsar添加JWT认证1.生成秘钥对2.生成用于超级管理员的token3.生成给测试用户的token4.配置集群broker的broker.conf5
酱紫很帅·2023-10-20 16:47

pulsar-admin tenants list返回HTTP 401 Unauthorized

在pulsar后台节点使用命令查询租户列表时返回401#bin/pulsar-admintenantslistHTTP401Unauthorized查看broker.conf发现开启了权限认证#cat/
Dyeln·2023-10-20 16:44

Kafka SASL安全认证机制与ACL用户权限控制

认证KafkaSASL的认证范围包含如下：Client与Broker之间Broker与Broker之间Broker与Z
PONY LEE·2023-10-20 13:37

Kafka2.6版本权限认证

信道加密就是为client到broker、broker到broker以及工具脚本与broker之间的数据传输配置SSL；认证机制主要是指配置SASL，而受权是经过ACL接口命令来完成的。
zhaojinweiwei·2023-10-20 13:37

Kerberos安全认证-连载7-大数据技术组件之搭建Kafka集群

32020645/article/details/1310812461.节点划分这里选择Kafka版本为3.3.1,对应的搭建节点如下：节点IP节点名称Kafka服务192.168.179.4node1kafkabroker192.168.179
IT贫道·2023-10-20 13:36

3、Kafka Broker

4.1KafkaBroker工作流程4.1.1Zookeeper存储的Kafka信息（1）启动Zookeeper客户端。
myprince003·2023-10-20 11:09

kafka生产者和消费者

发送原理生产者重要参数列表生产者命令行操作1、查看操作生产者命令参数[atguigu@hadoop102kafka]$bin/kafka-console-producer.sh参数描述--bootstrap-server连接的KafkaBroker
笨鸟先-森·2023-10-20 10:05

2、Kafka 生产者

main线程将消息发送给RecordAccumulator，Sender线程不断从RecordAccumulator中拉取消息发送到KafkaBroker。
myprince003·2023-10-20 10:56

kafka消费者的group id从哪里获取

消费者拉取broker的消息时需要指定groupid，而生产者将消息发送到broker的时候并不会指定groupid，那么消费者的groupid从哪里获取呢？
邓不利东·2023-10-20 02:09

Apache Doris && Kafka

Kafka硬件配置选择Kafka生产者KafkaBrokerKafka消费者Kafka总体针对Kafka3.0.0Kafka传统定义：分布式的基于发布订阅的消息队列MessageQueue。
wqy19941008·2023-10-20 00:03

Apache Doris (二十五）：Doris 数据导入(三）Broker Load-1

目录1.基本原理2.BrokerLoad语法进入正文之前，欢迎订阅专题、对博文点赞、评论、收藏，关注IT贫道，获取高质量博客内容！宝子们订阅、点赞、收藏不迷路！抓紧订阅专题！
IT贫道·2023-10-20 00:28

Apache Doris 02|导入数据遇到的问题

1、brokerload数据导入失败loadlabelexample_db.stuscore(datainfile("hdfs://devtest4.com:50070/tmp/testdata/stuscore.txt
爱吃鱼的荔果果·2023-10-20 00:55

Mq的幂等性问题分析和基本处理

但是消费者消费消息失败除了以上原因外，还关系到我们在消费的方法中是否会产生异常，一旦产生异常，消费者就会给broker返回ack为0的应答，那么这个消息就会存在broker里面不会被剔除，并且会触发消息的重试机制
codeWjh·2023-10-20 00:30

8--安装kafka_2.10-0.10.2.0集群（三个节点）

1.tar–zxvfkafka_2.10-0.10.0.1.tgz2.配置(config/server.properties)1)master节点上broker.id=0zookeeper.connect
子秦1117·2023-10-19 19:49

kafka_2.10-0.8.2.1集群搭建和简单使用

1.解压kafkatar-zxvfkafka_2.10-0.8.2.1-C/software2.1在hadoop节点修改配置文件config/server.propertiesbroker.id=0#代理的
chucancheng5319·2023-10-19 19:14

kafka_2.10启动Kafka broker

要启动Kafkabroker，你需要执行以下步骤：首先，确保你已经安装了Kafka。你可以从ApacheKafka的官方网站下载Kafka的二进制发行版，并按照官方文档中的说明进行安装。
似水流年it·2023-10-19 19:39

针对Emq X Broker实现简单的Webhook接口

1、安装Docker为了避免重复安装，这里使用Docker来安装EmqXBroker，Docker直接去官网下载安装包安装即可。
delicacylee·2023-10-19 09:36

RabbitMQ 升级到 3.8 后，消息触发重新排队和投递？

消费者必须回应basic_ack，Broker才会删除消息。这也是保证消息不丢失的基本操作。开启预取（basic_qos）由于RabbitMQ会将指定数量的消
夏天的技术博客·2023-10-19 04:51

FATAL Fatal error during KafkaServer startup. Prepare to shutdown 解决方法

FATALFatalerrorduringKafkaServerstartup.Preparetoshutdown(kafka.server.KafkaServer)kafka.common.InconsistentBrokerIdException
Mr.史·2023-10-19 01:52

Kafka生产者ack机制剖析

Kafka有两个很重要的配置参数，acks与min.insync.replicas.其中acks是producer的配置参数，min.insync.replicas是Broker端的配置参数，这两个参数对于生产者不丢失数据起到了很大的作用
大数据技术与数仓·2023-10-18 22:32

Apache Doris 入门教程19：数据更新及删除

批量删除目前Doris支持BrokerLoad，RoutineLoad，StreamLoad等多种导入方式，对于数据的删除目前只能通过delete语句进行删除，使用delete语句的方式删除时，每执行一次
sunjian286·2023-10-18 21:23

SparkStreaming 如何整合 Kafka

Kafka回顾核心概念图解Broker：安装Kafka服务的机器就是一个brokerimageProducer：消息的生产者，负责将数据写入到broker中(push)Consumer：消息的消费者，负责从
染墨安然·2023-10-18 14:20

Apache Doris系列之：安装与部署详细步骤

ApacheDoris系列之：安装与部署详细步骤一、软硬件需求二、操作系统安装要求三、时钟同步四、关闭交换分区五、Linux文件系统六、开发测试环境七、生产环境八、FE和BE的作用九、FE节点的数量十、部署最佳方案十一、Broker
最笨的羊羊·2023-10-18 11:49

Docker部署单节点Kafka

文章目录Docker部署单节点Kafka参考镜像wurstmeister/zookeeperOverviewwurstmeister/kafkaOverview部署单Brokerkafka环境变量：启动与停止命令测试验证
DuebassLei·2023-10-18 08:32
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他