E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Broker
Kafka -- 初识
目录kafka是什么TopicPartition
Broker
CousumerCousumerGroupOffsetreblance
broker
消息存储Isrkafka是什么Kafka是一个分布式的消息引擎
十&年
·
2023-12-14 12:17
大数据
kafla
kafka
分布式
使用mqttx模拟发布订阅
安装mqttx安装地址:https://www.emqx.com/zh/downloads/MQTTX使用提供的公共服务地址测试公共服务地址:
broker
.emqx.io1、连接协议通过MQTT协议连接到部署通过
心情无变化
·
2023-12-14 12:06
react
前端
javascript
react.js
vscode
kafka学习
1、
broker
:kafka服务器,负责消息存储和转发2、topic:消息类型3、partition:topic的分区,一个topic可以包含多个partition,topic消息保存在各个partition
CopyLower
·
2023-12-14 12:55
学习
kafka
学习
分布式
Kafka
Broker
端重要参数
Broker
是需要配置存储信息的,即
Broker
使用哪些磁盘。
taj3991
·
2023-12-06 20:21
RocketMQ主从同步
1、概述主从同步同步的是啥作为消息中间件,无疑是消息相当于给数据做”备份“,主节点服务器
Broker
宕机后,消费者可以从从节点的服务消费消息,可以保证业务的正常运行。
mingxungu
·
2023-12-06 16:38
Kafka -基础篇
设计理念低延迟:持久化消息、消费消息时间复杂度都为O(1)高吞吐:普通机器也可以实现每秒发送10W条消息水平扩展:
broker
、producer、consumer都支持在线水平扩展,顺序性:每个partit
~AC~
·
2023-12-06 11:49
golang
java
6、
Broker
消息处理流程(六)
前面分析完
Broker
启动会启动RemotingServer服务同时会注册Processor处理器,接着分析Producer进行消息的发送,当Producer发送完消息后就得到
Broker
去接收Producer
myprince003
·
2023-12-06 11:45
RocketMQ
rocketmq
8、
Broker
进一步了解
1、
Broker
消息分发服务以及构建ConsumeQueue和IndexFile与消息清除前面分析如何进行刷盘,本章分析
Broker
的消息分发以及构建ConsumerQueue和IndexFile,两者构建是为了能够提高效率
myprince003
·
2023-12-06 10:32
RocketMQ
java
rocketmq
几款流行MQTT
Broker
性能对比
前言最近百度新开源了一款MQTT
Broker
,带着期待,于是我们准备了了一次性能的基准测试,主要为了测评各MQTT
Broker
之间的性能差异。
程序媛之Lemon
·
2023-12-06 10:32
物联网
iot
mqtt
RocketMQ-源码架构
ApacheRocketMQisacloudnativemessagingandstreamingplatform,makingitsimpletobuildevent-drivenapplications.RocketMQ的官方网站下载:下载|RocketMQ重要模块:
broker
有梦想的年轻人6174
·
2023-12-06 09:34
java
rocketmq
Doris数据备份及恢复
Doris支持将当前数据以文件的形式,通过
broker
备份到远端存储系统中。之后可以通过恢复命令,从远端存储系统中将数据恢复到任意Doris集群。
shangjg3
·
2023-12-06 08:48
Doris
大数据
数据仓库
doris
sql
kafka配置外网访问
本以为很简单的事情卡了好几个小时,主要还是对kafka不了解导致的,特此记录.核心就是两个配置:listeners和advertised.listeners按照我的理解:listeners是Kafka
Broker
三川三一宁
·
2023-12-06 07:46
kafka入门(三):kafka多线程消费
kafka多线程消费的代码:publicclassThirdMultiConsumerThreadDemo{publicstaticfinalString
BROKER
_LIST="localhost:9092
乐之者v
·
2023-12-06 05:15
A1--kafka
kafka
学习kafka
一个存放消息的组件生产者,消费者,
broker
三部分消息队列的两种模式*生产者和消费者(消费者主动拉取信息,然后删除)*发布订阅()kafka基础架构*一个topic有多个partition(副本(信息非全量
程序猿小蝌蚪 黄小帅
·
2023-12-06 05:42
学习
kafka
分布式
NAO机器人——编程基础
模块通过
Broker
通告它所提供的方法。通过
Broker
,任何模块都可以找到所有己经通告的模块及方法。
清园暖歌
·
2023-12-06 02:10
NAO
python
NAO
人工智能
RocketMQ基本概念
消息模型(MessageModel)RocketMQ主要由Producer、
Broker
、Consumer三部分组成,其中Producer负责生产消息,Consumer负责消费消息,
Broker
负责存储消息
xuxigifxfh
·
2023-12-05 20:33
#
MQ
rocketmq
服务异步通讯
同步通讯和异步通讯同步调用的优点:时效性较强,可以立即得到结果同步调用的问题:耦合度高性能和吞吐能力下降有额外的资源消耗有级联失败问题异步通信的优点:耦合度低吞吐量提升故障隔离流量削峰异步通信的缺点:依赖于
Broker
weixin_50458070
·
2023-12-05 10:53
微服务
java
3. Kafka Producer
如果设置成异步的模式,可以运行生产者以batch的形式push数据,这样会极大的提高
broker
的性能,但是这样会增加丢失数据
西部小笼包
·
2023-12-05 10:39
Window下的RocketMQ踩坑记录
3、修改RocketMQ配置3.1、修改rocketmq-all-4.9.1-bin-release\conf下的
broker
.conf#LicensedtotheApacheSoftwareFound
zzm_fengye
·
2023-12-05 00:10
java-rocketmq
rocketmq
java
SpringBoot 使用RocketMQ踩坑经历
一、使用JDK11需要修改配置run
broker
.cmdifnotexist"%JAVA_HOME%\bin\java.exe"echoPleasesettheJAVA_HOMEvariableinyourenvironment
zengzhenkun
·
2023-12-05 00:39
java
开发语言
后端
SpringCloudStream集成Rocketmq踩坑笔记
2、com.alibaba.rocketmq.client.exception.MQ
Broker
Exception:CODE:14DESC:servicenotava
Dragon Wu
·
2023-12-05 00:38
springcloud
技术栈与架构
rocketmq
spring
cloud
Linux远程服务器rocketMQ踩坑记录!!!
一部署阶段1.启动命令nameServer启动:nohupshbin/mqnamesrv-nip地址:9876&
broker
启动:nohupshbin/mq
broker
-nip地址:9876autoCreateTopicEnable
qq_34617458
·
2023-12-05 00:36
java
关于rocketMQ踩坑的那些事
org.apache.rocketmq.client.exception.MQClientException:Send[3]times,stillfailed,cost[66]ms,Topic:topic,
Broker
sSent
crisp制药
·
2023-12-05 00:34
rocketmq
大数据开发:Kafka消息存储到
Broker
的流程
今天的大数据开发学习分享,我们就主要来讲讲Kafka消息存储到
Broker
的流程。
成都加米谷大数据
·
2023-12-04 23:34
消息队列(六):服务器设计
推送给消费者消息的基本实现思路让
broker
Server把哪些消费者管理好收到对应的消息,把消息推送给消费者消费者是以队列为维度来订阅消息的,一个队列可以有多个消费者(此处我们约定按照轮询的方式来进行消费
我可是ikun啊
·
2023-12-04 17:55
消息队列
java
开发语言
The moon and sixpence Day 3
主人公通过MissWaterford认识了作家mrs.Strickland一位特别的作家,单纯有艺术追求,她的丈夫却是对文学无感的股票经理人stock
broker
milaji
·
2023-12-04 13:59
28 主题管理
1.如何删除主题执行kafka-topics脚本,删除操作是异步的,执行完脚本只是把主题标记为已删除2.删除主题失败可能原因:副本所在
broker
宕机了待删除主题的部分分区还在迁移解决方法:手动删除zk
ZyyIsPig
·
2023-12-04 08:09
kafka核心技术与实战
kafka
29 kafka动态配置
为什么需要动态配置线上运行的kafka
broker
修改配置需要重启的话,影响比较大。
ZyyIsPig
·
2023-12-04 08:06
kafka核心技术与实战
kafka
RocketMQ消息丢失解决方案:同步刷盘+手动提交
因为虽然我们解决了生产者发送消息时候的消息丢失问题,但也只是保证
Broker
正确的接收到了消息,实际上接收到的消息会保存在oscache中,如果此时
broker
机器突然宕机,oscache中的消息数据就丢失掉了
HUC王子
·
2023-12-04 08:06
kafka简介
特点高吞吐量:单机每秒几百MB的读写消息持久化高扩展性高可靠性支持多消费者(这个是比较重要的特点)拓扑结构
Broker
:Kafka集群包含一个或多个服务器,这种服务器被称为
broker
Producer:
码蹄疾
·
2023-12-04 07:25
kafka
apache
服务器
分布式
linkedin
RocketMQ源码详解 |
Broker
篇 · 其一:线程模型与接收链路
概述在上一节RocketMQ源码详解|Producer篇·其二:消息组成、发送链路中,我们终于将消息发送出了Producer,在短暂的tcp握手后,很快它就会进入目的
Broker
。
面向bug,春暖花开
·
2023-12-04 02:51
java
maven
spring
C#使用MQTT通信 .Net实现MQTT通信 java使用MQTT通信 java实现MQTT通信 MQTT发送、订阅
以下是使用MQTT进行通信的一些基本概念:
Broker
MQTT通信中的中间件,负责接收发布者发布的消息并将其传递给订阅者。
weijia3624
·
2023-12-04 00:23
JAVA
C#
java与mqtt通信
C#与mqtt通信
C# 实现MQTT通讯
MQTTnet4.2.1.781背景MCU加4G模组要测试MQTT通讯,和功能开发,为方便自己调试,写了个小工具做简单命令首发MQTT连接MCU肯定是作为客户端client,项目中已经搭建好了MQTT
Broker
柿子风年
·
2023-12-04 00:22
C#
c#
Kafka 集群增加节点(
Broker
)
背景:原集群三台主机节点,由于业务增长迅速,现需扩容三台节点,增加至六节点集群;原三台Zookeeper节点无需扩容。初始化新节点准备三台新节点,分别安装相同版本kafka应用,并复制原集群配置进行修改。启动三台节点观察是否加入集群成功。迁移topic分区查看topic在哪些分区上sh./kafka-topics.sh--describe--topicdemo--bootstrap-server1
天空海阔linan
·
2023-12-03 23:38
大数据相关
kafka
java
Celery
Celery是一个基于python开发的分布式异步消息队列Celery的架构由三部分组成,消息中间件(message
broker
),任务执行单元(worker)和任务执行结果存储(taskresultstore
Strict Flora
·
2023-12-03 22:04
python
Kafka Eagle 可视化工具简单介绍
KafkaEagle可视化工具作用:监控
Broker
、Topic、Consumer、Cluster、Zookeeper、ConsumerGroups、Metrics(指标统计)等相关信息。
笔头还没烂
·
2023-12-03 21:37
MQTT客户端、代理(
broker
)和连接建立
接下来,将深入MQTT的世界,介绍MQTT代理(
broker
)和MQTT的连接
雨打夏夜
·
2023-12-03 16:48
MQTT
MQTT
MQTT 基础 P1 -- MQTT是什么 && publish/subscribe
MQTTPart1后面还有几个part讲详细的介绍we’llexplorethebasicconcepts(publish/subscribe,client/
broker
)andbasicfunctionality
...xiexiaohan
·
2023-12-03 16:47
MQTT
mqtt
Windows实现Mqtt订阅和发布,最新教程,细到极致
一个轻量级的,基于tcp传输层的应用层协议,它是轻量级的,相比于websocket来说,然后我这里就用人话大致说下它的工作过程:相当于是张三要给李四、王五发送消息,但是李四、王五不能当前发送,需要一个wx群(
broker
Jesscia ^_^
·
2023-12-03 16:16
MQTT
websocket
https
linux
MQ——RabbitMQ概念
RabbitMQRabbitMQ的概念四大核心概念生产者交换机队列消费者RabbitMQ六种方式名词介绍
Broker
VirtualhostConnectionChannelExchangeQueueBindingRabbitMQ
~^~^
·
2023-12-03 13:06
MQ
java-rabbitmq
rabbitmq
分布式
Kafka常用术语
名词解释
Broker
节点:一个Kafka节点就是一个
Broker
,一个和多个
Broker
可以组成一个Kafka集群Topic主题:Kafka根据Topic对消息进行归类,发布到Kafka集群的每套消息都需要指定一个
xuxigifxfh
·
2023-12-03 09:48
#
MQ
kafka
分布式
RocketMQ事务消息源码解析
一.概述半事务消息:指的是发送至
broker
但是还没被commit的消息,在半事务消息被确认之前都是无法被消费者消费的。
听到微笑
·
2023-12-03 08:38
RocketMQ
rocketmq
RocketMQ阅读源码前的准备
本文将讲解如何在IDEA中导入RocketMQ源码,并运行
Broker
和NameServer,编写一个消息发送与消息消费的示例。
听到微笑
·
2023-12-03 08:05
源码分析
RocketMQ
rocketmq
RocketMQ消息过滤机制源码详解
#RocketMQ提供了2种消息过滤的方式:TAG过滤SQL92过滤SQL过滤默认是没有打开的,如果想要支持,必须在
broker
的配置文件中设置:enablePropertyFilter=true一.示例代码
听到微笑
·
2023-12-03 07:42
源码分析
RocketMQ
rocketmq
什么是消息队列?
代理:
Broker
主要的处理单元,负责消息的存储、投递、及
武昌库里写JAVA
·
2023-12-03 05:26
高手面试
中间件
rabbitmq
Kafka-12.设计-配额
Kafka集群能够对请求实施配额,以控制客户端使用的
broker
资源。
悠扬前奏
·
2023-12-03 04:40
关于MQTT协议与QT的结合【保姆级的操作手册一】
2.MQTT的好处:实现远程传感器和控制设备而设计的协议3.MQTT的三种角色:发布者(Publish)、代理(
Broker
)(服务器)、订阅者(Subscri
Duffy_Gallagher
·
2023-12-03 03:52
QT开发
物联网
iot
centos7 安装配置emqx
语言开发的MQ消息服务器,安装前先安装erlang环境支持yuminstallerlang-y1、下载[root@testsrc]#wget-chttps://www.emqx.cn/downloads/
broker
oToyix
·
2023-12-02 22:26
linux常用基础技能及服务
emqttd
emqx
MQ
centos
rocketmq容器化部署
1.1.创建数据目录mkdir-p/data/rocketmq/{
broker
,dashboard,namesrv}cd/data/rocketmq/
broker
mkdirconflogsstorecd
Winter Liu
·
2023-12-02 21:43
java-rocketmq
rocketmq
java
Kafka详解(中)——Kafka客户端操作
脚本名称用途描述connect-distributed.sh连接kafka集群模式connect-standalone.sh连接kafka单机模式kafka-acls.sh设置Kafka权限kafka-
broker
-api-versions.sh
98seven
·
2023-12-02 13:30
消息队列Kafka
kafka
java
后端
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他