E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BROKER
【Kafka基本原理】
文章目录一、Kafka介绍1、MQ的作用2、为什么要用Kafka三、理解Kakfa的消息传递机制四、Kafka集群服务五、理解服务端的Topic、Partition和
Broker
六、Kafka集群的整体结构一
向前再向前
·
2023-12-17 22:28
kafka
【转载】RocketMQ是怎么跑起来的?
一说到RocketMQ,很多人人都知道其有四大组件,NameServer、
Broker
、Producer、Consumer,也大概都知道这四个组件分别有什么作用,负责什么功能,但是不知道这四个组件是如何配合的
foreverpx
·
2023-12-17 21:48
Web后端
rabbitmq
rocketMQ
消息队列
Kafka3.0.0安装使用教程
-3.0.0.tgz解压目录结构如下cdconfigllzookeeper.properties配置不用动,如果端口占用可以修改一下端口编辑kafka的server.properties#节点唯一标识
broker
.id
YMY_666
·
2023-12-17 18:42
kafka
java
分布式
27高水位和leader epoch
1.leaderepoch是如何在
broker
之间同步的TODO2.已经写入的消息不一定发送成功,消息发送成功的判断依据是什么?
ZyyIsPig
·
2023-12-17 18:57
kafka核心技术与实战
kafka
MQTT服务质量-QoS
QoS是什么MQTT提供三个QoS等级:最多一次(QoS0)至少一次(QoS1)确切一次(QoS2)在MQTT中如何检查消息发送当讨论MQTT中的QoS时,很重要的是考虑消息从发布的客户端到代理(
broker
雨打夏夜
·
2023-12-17 14:31
MQTT
MQTT
架构
中间件
MQTT-持久会话与干净会话
当一个客户端和MQTT代理(
broker
)建立了持久会话,代理(
broker
)存储客户端的订阅信息和任何针对该客户端未发送的消息。这样,如果这个客户端断开连接,然后重新连接,就可以无缝的恢复通信。
雨打夏夜
·
2023-12-17 14:31
MQTT
MQTT
中间件
架构
MQTT主题、通配符和最佳实践
MQTT主题在MQTT生态系统非常重要,因为代理(
broker
)依赖主题确定哪个客户端接收指定的主题。
雨打夏夜
·
2023-12-17 14:30
MQTT
MQTT
中间件
MQTT中的保留消息(Retained Message)
代理(
broker
)为对应的主题保留最后的保留消息及对应的QoS。每一个订阅了该主题的客户端在订阅之后会马上收到这个保留消息。代理(
broker
)为每个主题只存储一条保留消息。
雨打夏夜
·
2023-12-17 14:57
MQTT
MQTT
中间件
架构
两种借助node-red达到数据交互可视化的方法
我们实现了从边缘网关到mqtt
broker
再通过node-red到时序数据库influxdb,最后通过Grafana进行数据可视化展示。弊端:展示层只是从数据库中查询数据进行展示,是无法来试试控制的。
ZiT11x
·
2023-12-17 13:43
物联网边缘网关
数据可视化
物联网
阿里云centos8.1 Docker+Kafka安装使用
环境&软件包阿里云centos8.1dockerzookeeperkafka安装zookeeperkafka依赖zookeeper,通过zookeeper管理
broker
,需先安装zookeeper#拉取镜像
artCoding
·
2023-12-17 05:23
嵌入式mqtt总线架构方案mosquitto+paho
MQTT协议提供一对多的消息发布,可以降低应用程序的耦合性,用户只需要编写极少量的应用代码就能完成一对多的消息发布与订阅,该协议是基于模型,在协议中主要有三种身份:发布者(Publisher)、服务器(
Broker
阿荻在肝了
·
2023-12-17 04:34
知识汇总学习总结
架构
rabbitmq
dcoker-compose一键部署EFAK —— 筑梦之路
简介EFAK(EagleForApacheKafka,以前称为KafkaEagle)是一款由国内公司开源的Kafka集群监控系统,可以用来监视kafka集群的
broker
状态、Topic信息、IO、内存
筑梦之路
·
2023-12-17 03:40
数据库技术
缓存技术
linux系统运维
linux
FolkMQ 国产消息中间件,v1.0.21 发布
简介采用“多路复用”+“内存运行”+“快照持久化”+“
Broker
集群模式”(可选)+基于Socket.D网络应用协议开发。全新设计,自主架构!
组合缺一
·
2023-12-17 01:23
FolkMQ
内存型消息中间件
国产化
开源
java
消息中间件
信创
RocketMQ相关概念与使用入门详解
相关概念消息模型MQ的简单消息模型RocketMQ的复杂消息模型RocketMQ中消息相关概念消息(Message)主题(Topic)Tags队列消息标识RocketMQ中的物理对象NameServer
Broker
ProducerConsumerNameServer
ShareBeHappy_Qin
·
2023-12-16 22:29
Java
java-rocketmq
rocketmq
java
Kafka内容分享(四):Kafka 架构和幂等性与事务
目录一、架构1.1、Kafka重要概念1.1.1、
broker
1.1.2、zookeeper1.1.3、producer(生产者)1.1.4、consumer(消费者)1.1.5、consumergroup
之乎者也·
·
2023-12-16 18:44
MQ(Message
Queue)消息队列
内容分享
Kafka
面试题分享
kafka
分布式
RabbitMQ基础概念及入门demo示例
1.1前置概念1.1.1AMQP核心概念虚拟主机(virtualhost)或(vhost)一组交换机、队列和绑定器被称为虚拟主机(vhost)RabbitMQserver可以说就是一个消息队列服务器实体(
Broker
Arbitrary.`
·
2023-12-16 18:20
消息中间件
rabbitmq
java
KafKa基本原理
分布式,分区,多副本,zk协调的分布式消息系统使用日志收集消息系统用户活动跟踪运营指标概念
Broker
topicproducerconsumerconsumergrouppartition通信基于tcp
小淘淘喵的主人
·
2023-12-16 13:59
java
kafka常用命令
/bin/kafka-console-producer.sh--
broker
-listdn02.hadoop.cn:6667,dn03.hadoop.cn:6667,dn04.hadoop.cn:6667
wind_103
·
2023-12-16 12:23
扫盲Kafka?看这一篇就够了! | 京东云技术团队
但如果使用消息队列,就可以将消息暂存在消息管道中,下游可以按照自己的速度逐步处理;可扩展:通过横向扩展生产者、消费者和
broker
,Kafka可以轻松处理巨大的消息流;高吞吐、低延迟:在一台普通的服务器上既可以达
京东云技术团队
·
2023-12-16 11:02
硬核干货
数据库
kafka
京东云
分布式
消息队列
【Kafka】Kafka 实现 Exactly-once
比如在Kafka中,
broker
可能会crash,在producer推送数据至topic的过程中也可能会遇到网络问题。
w1992wishes
·
2023-12-16 10:59
kafka学习笔记--
broker
工作流程、重要参数
如有侵权、联系速删视频教程链接:【尚硅谷】Kafka3.x教程(从入门到调优,深入全面)文章目录Kafka
Broker
工作流程Kakfa信息存储在Zookeeper中Kafka
Broker
总体工作流程
Broker
向着百万年薪努力的小赵
·
2023-12-16 09:59
#
Kafka学习--入门到调优
kafka
学习
笔记
RocketMQ的监控和管理工具有哪些❓
通过Console,用户可以:查看
Broker
、Topic、Consumer等运
二狗plus
·
2023-12-16 05:19
RocketMQ
rocketmq
RocketMQ 的两种消息消费模式:Pull(拉取)和Push(推送)
下面是它们的主要特点和比较:Pull(拉取)模式:主动权在消费者:在Pull模式中,消费者主动向
Broker
请求消息,决定拉取的时机和拉取的数量。
二狗plus
·
2023-12-16 05:19
RocketMQ
java-rocketmq
rocketmq
java
什么是rocketmq❓
本文将深入探讨RocketMQ的基本概念、用途,以及在实际分布式系统中的作用,并对Producer(生产者)、
Broker
、Consumer(消费者)、Topic(主题)以及NameServer等核心概念进行详细讲解
二狗plus
·
2023-12-16 05:09
RocketMQ
java
rocketmq
14-Kafka-Day02
第4章Kafka
Broker
4.1Kafka
Broker
工作流程4.1.1Zookeeper存储的Kafka信息(1)启动Zookeeper客户端。
YuPangZa
·
2023-12-15 21:55
大数据
kafka
分布式
【中间件学习篇_Kafka】搞定kafka术语 No.4
kafka的相关术语有:生产者(Producer),消费者(Consumer),消费者组(ConsumerGroup),代理(
Broker
),集群(Cluster),消息(message),主题(Topic
C-Jonn
·
2023-12-15 21:32
#
Kafka
分布式消息中间件-kafka
Kafka基础Kafka是一个分布式的基于发布/订阅模式的消息引擎系统削峰填谷应用解耦异步处理理高吐出(10-20w的QPS)高性能架构图Kafka用zk管理
broker
搞定术语生产者:Producer
佳佳乐2503
·
2023-12-15 21:31
分布式专题
kafka
2、快速搞定Kafka术语
快速搞定Kafka术语Kafka服务端3层消息架构Kafka客户端
Broker
如何持久化数据小结Kafka服务端3层消息架构第1层是主题层,每个主题可以配置M个分区,而每个分区又可以配置N个副本。
cjh-Java
·
2023-12-15 21:25
#
Kafka
kafka
分布式
rocketmq启动nohup mq
broker
显示Exit 253错误解决方案
执行nohupmq
broker
-c/usr/local/rocketmq/rocketmq-all-4.9.1-bin-release/conf/2m-2s-sync/
broker
-b-s.properties
努力的布布
·
2023-12-15 14:47
java-rocketmq
rocketmq
java
ActiveMQ断线重连技巧,即通信高可用的配置
一、前置知识1.1基础概念ActiveMQ中有3个重要的角色:
Broker
、Producer、Consumer。
Broker
为消息代理,它是ActiveMQ服务端角色,接收客户端的链接并提供
Scalzdp
·
2023-12-15 14:17
Java入门
Java提高
Java扩展
activemq
MQ断线重连
ActiveMQ高可用配置
java
java-activemq
Docker安装RocketMQ详细教程
Broker
部署相对复杂,
Broker
分为Master与Slave,一个Master可以对应多个Slave,但是一个Slave只能对应一个Master,Master与Slave的对应关系通过指定相同的
Broker
Name
丷长玦遗墨
·
2023-12-15 12:38
Docker
java-rocketmq
docker
rocketmq
RocketMQ的架构是什么样的❓
本文将深入探讨RocketMQ的核心组件,包括Producer、
Broker
、Consumer和NameServer,以及它们在整个架构中的角色和功能。
二狗plus
·
2023-12-15 11:56
RocketMQ
rocketmq
java
事件处理:SpringBoot+Kafka
【图源来自网络】每个
broker
是kafka服务器一个
高 朗
·
2023-12-15 11:22
SpringBoot
kafka
spring
boot
java
rocketmq各节点间的关系
Broker
会定时的发送路由信息到NameServer中的每个机器进行更新,NameServer的集群是无状态的。
Broker
集群:
Broker
主要提供轻量级TOPIC和QUEUE机制。
时之令
·
2023-12-15 09:07
云原生之深入解析网络服务Istio、eBPF和RSocket
Broker
一、服务治理①“服务治理”简介在微服务时代,一个复杂的应用程序被分解为多个组件化、协作和连接的单元,服务往往会承担越来越多的业务责任,这使得服务治理的难度前所未有,仅仅依靠微服务框架级的治理是不够的,构建一个高维深度的治理体系需要解决。治理是指建立和实施微服务如何协同工作以实现系统设计和构建的业务目标的过程,服务不要超出其上下文边界非常重要。服务治理可以通过多种方式实现:服务注册和发现:Consu
╰つ栺尖篴夢ゞ
·
2023-12-15 08:16
云原生
istio
eBPF
RSocket
Broker
RocketMQ,消费组和topic作用
消费组和消息队列(
Broker
)会建立关系,消息发送到
Broker
,消费实例会从绑定的
Broker
中拉取消息。
计科6班
·
2023-12-15 07:51
java
Kafka-集群架构设计
Kafka的Zookeeper元数据梳理zookeeper整体数据Kafka将状态信息保存在Zookeeper中,这些状态信息记录了每个Kafka的
Broker
服务与另外的
Broker
服务有什么不同。
有梦想的年轻人6174
·
2023-12-15 06:41
kafka
分布式
java
Kafka-Kafka基本原理与集群快速搭建
Kafka消息系统由多个
broker
(服务器)组成,这些
broker
可以在多个
长情知热爱
·
2023-12-15 06:38
kafka
分布式
4、Kafka 核心常用配置项
Kafka核心常用配置项1、
Broker
端配置1.1、
Broker
配置存储信息1.2、
Broker
配置连接信息1.3、
Broker
配置Topic管理信息1.4、
Broker
配置数据留存管理信息2、Topic
cjh-Java
·
2023-12-15 06:27
#
Kafka
kafka
数据库
分布式
Kafka基础理论与常用命令详解(超详细)
文章目录前言一、Kafka概述1.Kafka简介2.Kafka架构2.1
Broker
(代理服务器)2.2Topic(主题)2.3Producer(生产者)2.4Consumer(消费者)2.5ConsumerGroup
大数据魔法师
·
2023-12-15 06:53
大数据
kafka
分布式
RocketMQ源码
RocketMQ的核心三流程启动流程RocketMQ服务端由两部分组成NameServer和
Broker
,NameServer是服务的注册中心,
Broker
会把自己的地址注册到NameServer,生产者和消费者启动的时候会先从
渔阳节度使
·
2023-12-15 06:12
学习笔记
rocketmq
使用 Docker 安装 RocketMQ 使用 docker 安装 rocketmq
2、运行RocketMQ实例:3、测试RocketMQ:使用Docker安装RocketMQ能够更加方便的部署和管理,以下是基本步骤:RocketMQ是一个分布式的消息中间件,由NameServer和
Broker
头上一片天空
·
2023-12-15 03:40
Linux
Docker
docker
服务器
linux
docker部署rocketmq(亲测有效)
1.docker安装rocketmq#拉取镜像dockerpullfoxiswho/rocketmq:server-4.7.0dockerpullfoxiswho/rocketmq:
broker
-4.7.02
沉迷python的肖小北
·
2023-12-15 03:09
docker
java-rocketmq
rocketmq
docker 配置rocketmq
启动nameserversudodockerrun-d-p9876:9876--namermqserverfoxiswho/rocketmq:server-4.5.1启动
broker
sudodockerrun-d-p10911
ArthasAlic
·
2023-12-15 03:32
java-rocketmq
rocketmq
java
kafka3.X集群安装(不使用zookeeper)
安装jdk主机名称IP角色node.idcentos.7.1192.168.244.128
broker
,controller1centos.7.2192.168.244.129
broker
,controll
cgm625637391
·
2023-12-15 03:41
zookeeper
分布式
云原生
RocketMQ实战-win10系统安装RocketMQ
配置环境变量在环境变量中的系统变量中新建变量:变量名:ROCKETMQ_HOME变量值:是RocketMQ的安装目录在path中增加%ROCKETMQ_HOME%\bin3、启动RecoketMQ可能需要修改run
broker
.cmd
清爽的暗之妖刀0369
·
2023-12-15 01:50
消息队列
rocketmq
【kafka】——
Broker
Kfaka
Broker
1.Zookeeper存储的kafka信息/kafka/
broker
s/dis存储
broker
的id,记录有哪些服务器/kafka/
broker
s/topics存储topic相关信息
那时的样子_
·
2023-12-14 23:57
java
kafka
linux
kafka
java
分布式
Kafka-快速实战
Kafka消息系统由多个
broker
(服务器)组成,这些
broker
可以在多个数据
有梦想的年轻人6174
·
2023-12-14 20:21
kafka
java
SpringBoot集成系列--Kakfa
文章目录一、代码1、添加依赖2、配置kafka3、创建生产者4、创建消费者5、测试二、遇到问题1、couldnotbeestablished.
Broker
maynotbeavailable2、Errorwhilefetchingmetadatawithcorrelationidxxx
程序员Forlan
·
2023-12-14 19:16
中间件
spring
boot
后端
kafka
RabbitMQ
时效性较强,可以立即得到结果同步调用的问题:1、耦合度高2、性能和吞吐能力下降3、有额外的资源消耗4、有级联失败问题异步通信的优点:1、耦合度低2、吞吐量提升3、故障隔离4、流量削峰异步通信的缺点:1、依赖于
Broker
@katoumegumi
·
2023-12-14 18:05
springcloud
spring
cloud
微服务
java
spring
intellij-idea
spring
boot
后端
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他