Broker

Flink 中kafka broker缩容导致Task一直重启

1.12.2Kafka客户端2.4.1在公司的Flink平台运行了一个读Kafka计算DAU的流程序，由于公司Kafka的缩容，直接导致了该程序一直在重启，重启了一个小时都还没恢复（具体的所容操作是下掉了四台kafkabroker
鸿乃江边鸟·2023-10-14 00:09

RabbitMQ 的 confirm 消息确认机制和 return 消息机制

代码地址：https://github.com/hmilyos/rabbitmqdemo.gitrabbitmq-api项目下1.confirm消息确认机制消息的确认是指生产者投递消息后，如果Broker
HmilyMing·2023-10-13 21:36

Kafka Producer源码

KafkaProducerKafkaProducer是kafka提供的与KafkaBroker连接的客户端工具，其具备高吞吐量、高性能等特性。
WunHwan·2023-10-13 21:02

RocketMQ集群搭建

3.RocketMQ集群搭建3.1各角色介绍Producer：消息的发送者；举例：发信者Consumer：消息接收者；举例：收信者Broker：暂存和传输消息；举例：邮局NameServer：管理Broker
码农GG·2023-10-13 19:44

springBoot整合RabbitMq实现手动确认消息

broke可靠性投递，开启ack投递成功确认，如果失败的话进行消息补偿/***@authoryueF_L*@date2023-08-1001:32*ConfirmCallback：消息只要被RabbitMQbroker
yueF_L·2023-10-13 18:39

KafkaOffsetMonitor 监控异常处理(消息堆积)

管理界面监控：命令行监控：bin/kafka-consumer-offset-checker.sh–zookeeper*–topic*–group**–broker-info分析1：topic异常造成：
ameko_2019·2023-10-13 17:40

深入理解Kafka分区副本机制

1.Kafka集群Kafka使用Zookeeper来维护集群成员(brokers)的信息。
shangjg3·2023-10-13 16:03

Zookeeper客户端常用操作命令

如下图：image.png查看节点状态信息stat/brokers如下图：i
liuzhenqiang·2023-10-13 15:29

多架构环境下docker-compose部署rocketmq单机模式—— 筑梦之路

准备broker配置文件#broker配置文件示例catdata/broker/conf/broker.confbrokerClusterName=DefaultClusterbrokerName=broker-abrokerId
筑梦之路·2023-10-13 13:17

Spring Boot集成kafka的相关配置

引入依赖：额外依赖只需要这一个，kafka-client不是springboot的东西，那是原生的kafka客户端，kafka-test也不需要，是用代码控制broker的东西。
谢小涛·2023-10-13 10:06

关于celery ValueError: not enough values to unpack (expected 3, got 1)

celery时，执行celery相关命令例如celery-Amaininspectactive或者celery-Amaininspectping等等会触发报错导致worker丢失排查原因是因为之前手动删除过brokerredis
九门佛爷·2023-10-13 08:53

Redis系列之基础篇

.Redis简介Redisisanopensource(BSDlicensed),in-memorydatastructurestore,usedasadatabase,cacheandmessagebroker.Itsupportsdat
可苯·2023-10-13 00:50

如何在vue中使用mqtt,在小程序中使用mqtt

一、mqtt配置工具：http://tools.emqx.io配置：mqtt地址：ws://broker.emqx.io:8083/mqtt主题：配置编辑页面2、mqtt实战VUE连接MQTT即时通讯1
八分钟de温暖·2023-10-12 22:44

kafka

Producers将消息发布到指定的Topic中,同时Producer也能决定将此消息归属于哪个partition代理（Broker）：已发布的消息保存在一组服务节点中，每个节点称之为一个broker，
武汉小旭旭·2023-10-12 20:10

Broker may not be available.

启动消费者./kafka-console-consumer.sh--bootstrap-server127.0.0.1:9092--from-beginning--topicasp_be报错信息image.png这个原因是因为kafka监听配置你可能没有配打开配置文件vimserver.propertiesimage.png开启监听设置即可listeners=PLAINTEXT://localho
yyk_96f8·2023-10-12 20:39

27-SpringBoot 消息服务与RabbitMQ

1.相关概述大多应用中，可通过消息服务中间件来提升系统异步通信、扩展解耦能力消息服务中两个重要概念：消息代理（messagebroker）和目的地（destination）当消息发送者发送消息以后，将由消息代理接管
鸣鼓ming·2023-10-12 17:08

Kafka可靠性保证

副本处于不同的broker，当leader副本出现故障时，从follower副本中重新选举新的leader本对外提供服务。Kafka通过多副本机制实现了故障的自动转移，当集群中某个
米兰的小铁匠xxm·2023-10-12 16:18

RabbitMQ-死信队列、延迟队列（原生+springboot+插件实现）

中演示延迟队列与死信队列2.2.1基本演示2.2.2优化-动态设置TTL2.2.3使用插件实现延迟队列2.3总结一、死信队列1.1概念死信顾名思义就是无法被消费的消息，一般来说，producer将消息投递到broker
UndefinedException·2023-10-12 16:26

我总结的面试题系列：kafka

为单位进行归纳将向Kafkatopic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一一个或多个服务组成，每个服务叫做一个broker.producers
姜汁撞可乐·2023-10-12 15:53

RocketMQ5 版本解决启用 Proxy 端口8081被占用问题

RocketMQ5.0.0版本增加了Proxy模块，启动时默认会用到8081端口，当端口被占用时，broker/proxy将无法启动，修改proxy端口方法如下：（1）在conf目录下新建proxyConfig.json
zooah212·2023-10-12 10:52

RocketMq 5.0 Windows启动

启动namesrvstartmqnamesrv.cmd#shellnohupshbin/mqnamesrv&启动Broker##windows版启动startmqbrokerproxy.cmd-nlocalhost
相信我是好人·2023-10-12 10:19

RocketMQ 5.0：无状态代理模式的探索与实践

，让我们来看下是遇到了哪些痛点问题，促使我们去探索一种无状态代理的RocketMQ新架构的；RocketMQ拥有一套极简的架构，多语言客户端通过自定义的Remoting协议与后端NameServer和Broker
阿里云云原生·2023-10-12 10:13

MQTT 简单介绍与实现

介绍它是一种机器之间通讯machine-to-machine(M2M)、物联网InternetofThings（IoT）常用的一种轻量级消息传输协议适用于网络带宽较低的场合包含发布、订阅模式，通过一个代理服务器（broker
随意啊_·2023-10-12 05:29

RocketMQ学习笔记

/rocketmq.apache.org下载地址：https://rocketmq.apache.org/download/1.2集群搭建（2m-2s-async模式）设计架构如下：服务器部署节点部署broker192.168.10.131namesrv
神雕大侠mu·2023-10-12 04:33

RocketMQ在Linux中的安装教程

安装教程一.环境说明二.JDK和RocketMQ版本说明三.源码安装四.RocketMQ_双主双从集群_docker安装1.前提2.broker-master-a配置文件3.broker-slave-a
我就是我352·2023-10-12 02:40

kafka传递文件_Kafka基于磁盘顺序IO和零拷贝技术实现高性能文件读写

考虑到这些因素，kafka是使用磁盘而不是kafka服务器broker进程内存来进行数据存储，并且基于磁盘顺序读写和MMAP技术来实现高
葛瞳·2023-10-12 01:26

Kafka 高效读写数据

2）零复制技术5Zookeeper在Kafka中的作用Kafka集群中有一个broker会被选举为Controller，负责管理集群b
大数据开发工程师-宋权·2023-10-12 01:55

Kafka在什么情况下会丢数据

一、producer配置acks=0在acks=0模式下，消息传输到Broker端没收到Broker的反馈即发送下一条，这种纯异步的发送方式，难免会丢数据。
Keal、·2023-10-12 00:02

使用mosquitto实现MQTT通信

1MQTT编程的前期准备MQTT通信时，使用发布/订阅消息模式，其通信模型如下：在编写客户端程序时，需要准备好服务器(broker)的ip地址和端口号。
三毛小白·2023-10-11 16:07

docker搭建rocketmq集群

mkdir-p/mydata/rocketmq/data/namesrv/logs/mydata/rocketmq/data/namesrv/storemkdir-p/mydata/rocketmq/data/broker
昱宸星光·2023-10-11 15:52

数据采集平台（二）

组内每个消费者并行消费为提高可用性，为每个partition增加若干副本，类似NameNodeHA5.2安装步骤解压kafka文件，改为缩略名进入kafka/config文件，修改配置文件：myid和brokerID
十七✧ᐦ̤·2023-10-11 14:22

阿里双十一交易核心链路产品--RocketMQ 底层原理及性能调优实战

RocketMQ产品发展RocketMQ版本发展阿里内部项目的使用展望未来RocketMQ的物理架构核心概念NameServer生产者(Producer)消费者(Consumer)消息(Message)主机(Broker
Java大厂面试君·2023-10-11 14:10

RocketMQ整体理解

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
谭俊杰 Jerry·2023-10-11 14:10

RocketMQ01-整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
roykingw·2023-10-11 14:39

VIP01-RocketMQ整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
liuhehe321·2023-10-11 14:04

一：RocketMQ整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
PoetryAndTheDistance·2023-10-11 14:01

SimNow仿真交易【官方环境介绍】 期货仿真环境地址 期货模拟交易

环境介绍simnow官网（注册模拟账号）：https://www.simnow.com.cn/BrokerID统一为：9999第一套（支持上期所期权、能源中心期权、中金所期权）：第一组：TradeFront
Leo.LIAO·2023-10-11 09:27

RabbitMQ入门

无需等待订阅者处理完成，响应更快速故障隔离：服务没有直接调用，不存在级联失败问题调用间没有阻塞，不会造成无效的资源占用耦合度极低，每个服务都可以灵活插拔，可替换流量削峰：不管发布事件的流量波动多大，都由Broker
lmd666·2023-10-11 09:06

中间件-Kafka学习笔记

ProducerAPIConsumerAPIKafka监控Kafka调优Kafka机器数量计算Kfka压力测试Kafka分区数计算Kafka概述kafka基础架构Producer：消息生产者，向kafkabroker
笑一笑、·2023-10-11 07:05

Kafka系列之—Kafka Broker安装（三）

一下载ApacheKafkaApacheKafka:ADistributedStreamingPlatform.https://kafka.apache.org/downloads.html二安装将Kafka安装在/usr/local/kafka目录下，使用之前配置好的Zookeeper,并把消息日志保存在/tmp/kafka-logs目录下tar-zxfkafka_2.12-3.1.1.tgzm
葛旭朋·2023-10-11 07:58

启动kafka报错ERROR Fatal error during KafkaServer startup. Prepare to shutdown ，找到原因就要可以解决

ERRORFatalerrorduringKafkaServerstartup.Preparetoshutdown(kafka.server.KafkaServer)kafka.common.InconsistentBrokerIdException
光数葱丁·2023-10-11 04:54

Kafka集群架构设计原理详解

这一部分主要是从可见的存储数据的角度来理解Kafka的Broker运行机制。这对于上一章节建立的简单模型，是一个很好的细节补充。Kaf
will.tsang·2023-10-11 00:33

Kafka日志索引详解以及生产常见问题分析与总结

但是，在进行具体业务时，还是需要各个Broker进行分工，各自处理好自己的工作。每个Broker如何高效的处理以及保存消息，也是Kafka高性能背后非常重要的设计。
will.tsang·2023-10-11 00:01

RabbitMQ高级特性可靠性传递，ACK机制，限流，TTL，死信，延迟，日志与监控，消息追踪的学习

RabbitMQ高级特性的学习一丶消息的可靠性传递（生产端）rabbitmq整个消息投递的路径为：producer—>rabbitmqbroker—>exchange—>queue—>consumer在使用
codingTop·2023-10-10 16:41

术语与缩写解释

抽象数据类型/用户定义类型2、Adapter：适配器3、COM：ComponentObjectModel，组件对象模型4、Container：容器5、CORBA：CommonObjectRequestBrokerarchitectiure
aaa-bbb-ccc·2023-10-10 14:22

第13课：MQTT 5.0 协议新特性

2018年，MQTT5.0已正式发布，虽然目前支持MQTT5.0的Broker和Client库还比较有限，但是作为MQTT未来的发展方向，我认为了解5.0的新特性还是很有必要的，也许看
sufish·2023-10-10 06:24

【MQTT学习】lesson14. MQTT 5.0 协议新特性

2018年，MQTT5.0已正式发布，虽然目前支持MQTT5.0的Broker和Client库还比较有限，但是作为MQTT未来的发展方向，我认为了解5.0的新特性还是很有必要的，也许看
沉默的小宇宙·2023-10-10 06:52

MQTT系列 | MQTT 5.0协议新特性

2018年，MQTT5.0已正式发布，但是目前支持MQTT5.0的Broker和Client库还比较有限。作为MQTT3.1.1的后续版本，为什么版本号直接变成了5.0？
多选参数-程序锅·2023-10-10 05:20

kafka架构详解及常见问题

kafka是什么kafka是一种高吞吐量的分布式消息系统kafka有什么作用作为常规的消息队列使用作为网站的活性跟踪工具作为日志收集中心kafka的架构名词解释broker：消息系统中的一个处理节点，一个
peerless_fu·2023-10-10 05:53

kafka的常见配置及详解

kafka的配置目录下server.propertie常用的几个配置broker.id在单机时无需修改，但在集群下部署时往往需要修改。它是个每一个broker在集群中的唯一表示，要求是正数。
搬砖明·2023-10-10 05:53
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他