E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BROKER
MQTT 术语表
Broker
有时我们也会直接将服务端称为
Broker
,这两个术语可以互换使用。CleanStart客户端可以在连接时使用这个字段来指示是期望从已存在的会话中恢复通信,还是创建一个全新的会话。
能源革命
·
2025-02-05 13:32
MQTT
IoT
技术
物联网
IoT
mqtt
Kafka SSL(TLS)安全协议
KafkaSSL的作用1.1数据加密1.2身份认证1.3数据完整性1.4防止中间人攻击1.5确保安全的分布式环境1.6防止拒绝服务(DoS)攻击2.KafkaSSL配置步骤(1)创建SSL证书(2)Kafka
Broker
王多鱼的梦想~
·
2025-02-04 21:06
Kafka修炼手册
kafka
ssl
安全
唠唠 RDS 那些事 ——RDS 服务部署
RDS服务包括以下的核心组件:RDCB——RemoteDesktopConnection
Broker
,远程桌面连接代理。RDWA——RemoteDesktopWebAccess,远程桌面Web访问。
SimminonGarcia
·
2025-02-04 07:09
运维
Kafka 单机和集群环境部署教程
ZooKeeper3.2配置ZooKeeper3.3启动ZooKeeper3.4验证ZooKeeper是否正常运行4.安装Kafka4.1下载并解压Kafka4.2配置Kafka4.3创建日志目录4.4启动Kafka
Broker
4.5
闲人编程
·
2025-02-03 03:54
大数据集群部署教程
kafka
分布式
集群
部署
单机
zookeeper
【技海登峰】Kafka漫谈系列(一)Kafka服务集群的核心组件
【技海登峰】Kafka漫谈系列(一)Kafka服务端的核心组件一.
Broker
完整的Kafka服务是集群Cluster结构,其由多个Kafka服务节点组成,每个物理节点即称为
Broker
,在实际部署中,
阿阿阿安
·
2025-02-02 13:49
【独家专栏】知识星球同步
专享优质好文
kafka
分布式
java
RabbitMQ高级特性 - 非持久化 / 持久化(交换机、队列、消息)
持久化机制概述实现非持久化(交换机、队列、消息)实现持久化(交换机、队列、消息)RabbitMQ持久化机制概述前面讲到了生产者消息确认机制和消费者消息确认机制,保证了消息传输的可靠性,但是这还不够,试想如果
Broker
陈亦康
·
2025-02-02 08:35
面试总结
rabbitmq
ruby
分布式
为AI聊天工具添加一个知识系统 之30 概念整体运营平台:中间架构层的
broker
service的API模型
本文要点本项目(为AI聊天工具增加知识系统)通过完善“公路”的整体概念框架最终(在外部)为三类公共运营性交通工具((高速-轿车taxi/中速--公交车bus/低速-卡车truck))提供运营平台。该平台对内通过明确交通路线上的三种“端”(end/stop/start)的一般术语框架作为程序的形式化规则起点,并全过程指导最终朝向形式化的每一个步骤的设计、实现和部署(自动化程度不同:人工,半自动化,完
一水鉴天
·
2025-02-02 07:57
智能制造
人工语言
软件智能
人工智能
【面试题】简述rabbitmq的组织架构
@[面试题]简述rabbitmq的组织架构RabbitMQ是一种流行的消息中间件,其架构设计围绕消息生产者,消息消费者和消息中转(
Broker
)展开。
土掉渣的二傻子
·
2025-02-01 12:10
rabbitmq
架构
分布式
python
【Proxy
Broker
】用Python打破网络限制的利器
Proxy
Broker
1.什么是Proxy
Broker
2.Proxy
Broker
的功能3.Proxy
Broker
的优势4.Proxy
Broker
的使用方法5.Proxy
Broker
的应用场景6.结语项目地址
山河不见老
·
2025-02-01 07:34
python
python
开发语言
中间件 | RocketMq - [
broker
配置]
INDEX
broker
.conf
broker
.conf干货见注释###集群名
broker
ClusterName=DefaultCluster###nameserver#nameserver地址namesrvAddr
问仙长何方蓬莱
·
2025-01-31 23:56
中间件
rocketmq
RocketMQ的集群架构是怎样的
RocketMQ的集群架构包括四个主要角色:NameServer集群、
Broker
主从集群、Producer和Consumer客户端。
还能在学一小时
·
2025-01-31 22:46
十七
Rocketmq
java-rocketmq
rocketmq
架构
【RocketMQ 存储】-
broker
端存储批量消息的逻辑
文章目录1.前言2.DefaultMessageStore#asyncPutMessages批量新增消息2.1Commit#asyncPutMessages2.2Commit#encode批量编码消息2.3MappedFile#appendMessages添加批量消息2.4MappedFile#appendMessagesInner添加批量消息2.5CommitLog#doAppend3.小结本文
月幻星影
·
2025-01-31 12:18
源码分析
RocketMQ
java-rocketmq
rocketmq
消息存储
Kafka 压缩算法详细介绍
文章目录一、Kafka压缩算法概述二、Kafka压缩的作用2.1降低网络带宽消耗2.2提高Kafka生产者和消费者吞吐量2.3减少Kafka磁盘存储占用2.4减少Kafka
Broker
负载2.5降低跨数据中心同步成本三
王多鱼的梦想~
·
2025-01-31 02:22
kafka
分布式
运维
apache
【SpringCloud微服务实战08】RabbitMQ 消息队列
无需等待订阅者处理完成,响应更快速故障隔离:服务没有直接调用,不存在级联失败问题调用间没有阻塞,不会造成无效的资源占用耦合度极低,每个服务都可以灵活插拔,可替换流量削峰:不管发布事件的流量波动多大,都由
Broker
李维山
·
2025-01-31 00:05
MQ实战
Java
rabbitmq
spring
cloud
spring
boot
基础渗透测试实验—永恒之蓝漏洞复现
4.2复现过程:1.查看上线主机2.使用Metasploit(MSF)工具3.选择一个编码技术,用来绕过杀毒软件的查杀4.远程控制目标机缓解措施概述永恒之蓝是指2017年4月14日晚,黑客团体Shadow
Broker
s
锅盖'awa'
·
2025-01-30 12:55
网络安全小白之路
linux
windows
系统安全
安全性测试
Kafka原理总结
Kafka是一个开源的分布式流式处理平台,在这个平台上可以发布、订阅以及处理数据流,具有强大的吞吐能力,让Kafka成为了一个高性能的发布与订阅消息系统一:概念理解
Broker
部署Kafka进程的服务被称之为
DEMOAHUI
·
2025-01-30 10:08
mq中间件
kafka
rocketmq python 某个队列不消费_RocketMQ消息发送常见错误与解决方案
1、Norouteinfoofthistopic无法找到路由信息,其完整的错误堆栈信息如下:而且很多读者朋友会说
Broker
端开启了自动创建主题也会出现上述问题。
weixin_39849479
·
2025-01-30 04:28
rocketmq
python
某个队列不消费
RocketMQ 系列文章
RocketMQ的Topic和消息队列MessageQueue信息,是怎么分布到
Broker
的?怎么负载均衡到
Broker
的?NameServer在RocketM
点滴~
·
2025-01-29 00:48
rocketmq
从建表语句带你学习doris_数据类型
column_definition1[,column_deinition2,......][,index_definition1,[,index_definition2,]])[ENGINE=[olap|mysql|
broker
圣·杰克船长
·
2025-01-28 23:09
doris
数据类型
分布式微服务系统架构第88集:kafka集群
需要多少个
broker
一个Kafka集群需要多少个
broker
取决于以下几个因素。首先,需要多少磁盘空间来保留数据,以及单个
broker
有多少空间可用。
掘金-我是哪吒
·
2025-01-28 18:27
分布式
微服务
系统架构
kafka
架构
【MQ】如何保证消息队列的高可用?
RocketMQNameServer集群部署
Broker
做了集群部署主从模式类型:同步复制、异步复制主节点返回消息给客户端的时候是否需要同步从节点Dledger:要求至少消息复制到半数以上的节点之后,才给客户端返回写入成功
Forest 森林
·
2025-01-28 09:24
消息队列
MQ
kafka
MQ和多线程异步有什么区别?
当业务系统处于高并发,MQ可以将消息堆积在
Broker
实例中,而多线程会创建大量线程,甚
大唐雨夜
·
2025-01-28 04:17
分布式
java
分布式
经验分享
doris: CSV导入数据
导入方式Doris支持以下方式导入CSV格式数据:StreamLoad
Broker
LoadRoutineLoadMySQLLoadINSERTINTOFROMS3TVFINSERTINTOFROMHDFSTVF
向阳1218
·
2025-01-27 16:56
大数据
doris
corba学习笔记
CORBA公用对象请求代理(调度)程序体系结构(CommonObjectRequest
Broker
Architecture),缩写为CORBA,是对象管理组织(ObjectManagementGroup
一枚前端猿
·
2025-01-27 15:44
RocketMQ源码分析之ACL
文章目录前言一、ACL介绍二、ACL源码分析1.
broker
在启动时如何启用ACL?2.客户端向
broker
端发送请求时都有哪些ACL方面的操作?3.
broker
收到客户端发送的请求后如何处理?
不爱学习的小妞
·
2025-01-27 02:23
rocketmq学习笔记
kafka-保姆级配置说明(consumer)
请求返回时,至少获取的字节数,默认值为1##当数据量不足时,客户端请求将会阻塞##此值越大,客户端请求阻塞的时间越长,这取决于producer生产效率和网络传输能力fetch.min.bytes=1##如果
broker
xiao-xiang
·
2025-01-26 20:11
kafka
kafka
分布式
简述kafka生产者ack确认机制
一、总结该章节主要探讨造成数据丢失问题生产者ack确认机制(目的是要有多少个分区副本收到消息,生产者才认为该消息写入成功;acks参数对数据是否丢失起重要的作用)(1)ack=0,就是表示生产者不会和
broker
技匠三石弟弟
·
2025-01-26 20:35
数据开发
kafka
Kafka 生产者中的ack的配置
此时ack有3个配置:1.ack=0kafka-cluster不需要任何的
broker
收到消息,就⽴即返回ack给⽣产者,最容易丢消息的,效率是最⾼的2.ack=1(默认):多副本之间的leader已经收到消息
欧阳冰轩
·
2025-01-26 20:04
Kafka
kafka
分布式
RabbitMQ 死信队列详解
一般来说,Producer将消息投递到
Broker
或者直接到Queue里了,Consumer从Queue取出消息进行消费,但某些时候由于特定的原因导致Queue中的某些消息无法被消费,这样的消息如果没有后续的处理
web18484626332
·
2025-01-26 19:02
面试
学习路线
阿里巴巴
android
前端
后端
doris:ORC
支持的导入方式以下导入方式支持ORC格式的数据导入:StreamLoad
Broker
LoadINSERTINTOFROMS3TVFINSERTINTOFROMHDFSTVF使用示例本节展示了不同导入方式下的
向阳1218
·
2025-01-26 19:30
大数据
doris
【53】Camunda8-Zeebe核心引擎-Partitions分区与Internal processing内部处理
在
broker
集群中,分区分布在节点之间,因此可以将其视为分片。启动/初始化Zeebe集群时,用户可以配置所需的分区数。如果使用过Kafka,这部分内容是比较相似的。
AlieNeny
·
2025-01-26 18:25
Camunda
camunda8
流程引擎
zeebe
partitions
分区
【48】Camunda8-Self-Managed部署
Camunda8Self-Managed主要包括以下服务/组件:Zeebe
Broker
andGatewayOperateTasklistConnectorsOptimizeIdentityWebModeler
AlieNeny
·
2025-01-26 18:55
Camunda
camunda
camunda8
环境安装
Self-Managed
Kafka生产者ACK参数与同步复制
目录生产者的ACK参数ack等于0ack等于1(默认)ack等于-1或allKafka的同步复制使用误区生产者的ACK参数Kafka的ack机制可以保证生产者发送的消息被
broker
接收成功。
WannaRunning
·
2025-01-26 18:24
kafka
分布式
RabbitMQ 架构分析
文章目录前言一、RabbitMQ架构分析1、
Broker
2、Vhost3、Producer4、Messages5、Connections6、Channel7、Exchange7、Queue8、Consumer
DREAM LINER SU
·
2025-01-26 09:49
rabbitmq
架构
ruby
java
分布式
Kafka 2.2.0 消息日志清理机制:日志删除 日志压缩
在了解日志清理机制之前,请先了解日志存储方式Kafka有两种日志清理策略:日志删除:按照保留策略删除日志分段需要将
Broker
端参数log.cleanup.policy设置为delete(默认值)日志压缩
A__Plus
·
2025-01-26 06:17
kafka
Kafka
消息队列
kafka内部工作机制
没个
broker
都有唯一的id,这个标识可以在配置文件中配置,在
broker
启动的时候,它会创建临时的节点把id注册到zookeeper中,当有其他
broker
加入集群中时,会判断是否已经有这个id,如果有相同的
一只叫狗的猫
·
2025-01-25 13:03
#
kafka
【Kafka:概念、架构与应用】
Producer)2.2消费者(Consumer)2.3主题(Topic)2.4分区(Partition)2.5消息偏移量(Offset)2.6消费组(ConsumerGroup)Kafka的架构设计3.1
Broker
三日看尽长安花
·
2025-01-25 12:28
系统架构师
kafka
架构
分布式
JavaEE进阶知识学习----SpringBoot高级(五)SpringBoot与消息
在消息服务中存在两个重要的概念:消息代理(message
broker
)和目的地(destination),当消息发送者发送消息以后,将由消息代理接管,消息代理保证消息传递到指定目的地消息队列主要有两种形式的目的地
四川码匠
·
2025-01-25 12:57
SpringBoot
Kafka:架构与核心机制
1.Kafka的架构1.1组件概述Kafka的架构由多个组件构成,主要包括以下部分:
Broker
:Kafka集群中的服务器,每个
Broker
存储一部分消息。
J老熊
·
2025-01-25 11:49
kafka
架构
分布式
面试
系统架构
后端
Kafka的Partition故障恢复机制与HW一致性保障-Epoch更新机制详解
为了确保系统的高可用性和数据的一致性,Kafka设计了一系列机制来应对
Broker
或Partition的故障。
大树~~
·
2025-01-25 04:27
#
Kafka
java
kafka
分布式
后端
Kafka 原理深入解析
Broker
:Kafka
啥子都不会吖
·
2025-01-25 00:00
分布式
kafka
分布式
doris:Azure Storage导入数据
使用S3Load导入使用S3Load导入对象存储上的文件,详细步骤可以参考
Broker
Load手册第1步:准备数据创建CSV文件s3load_example.csv文件
向阳1218
·
2025-01-24 16:53
azure
flask
microsoft
doris
SpringBoot使用Kafka如何保证消息不丢失
概述在SpringBoot中使用Kafka时,要确保消息不丢失,主要涉及到生产者(Producer)、消费者(Consumer)以及Kafka
Broker
的配置和设计。
小信丶
·
2025-01-24 07:17
消息队列技术栈
spring
boot
kafka
后端
RocketMQ源码分析之事务消息分析
我们看看官方文档给的事务消息的流程图:1、事务消息的发送与提交MQProducer将事务消息发送给MQServer(
Broker
服务器),这时的消息称为半消息,半消息是不能被消费者消费的。当
小虾米 ~
·
2025-01-22 19:09
RocketMQ
java-rocketmq
rocketmq
java
消息队列篇--原理篇--RabbitMQ和Kafka对比分析
单片架构:RabbitMQ采用的是传统的
Broker
架构,所有消息都通过一个或多个
Broker
节点进行处理。
Broker
负责接
weisian151
·
2025-01-22 05:52
消息队列篇
rabbitmq
kafka
分布式
doris:阿里云 OSS 导入数据
使用S3Load导入使用S3Load导入对象存储上的文件,详细步骤可以参考
Broker
Load手册第1步:准备数据创建CSV文件s3load_example.csv文件存储在阿里云OSS上,其内容如下:
向阳1218
·
2025-01-21 13:01
大数据
阿里云
数据库
云计算
doris
nginx反向代理kafka集群实现内外网隔离访问 —— 筑梦之路
背景说明我们在使用Kafka客户端连接到Kafka集群时,即使连接的节点只配置了一个集群的
Broker
地址,该
Broker
将返回给客户端集群所有节点的信息列表。
筑梦之路
·
2025-01-21 11:42
linux系统运维
大数据
nginx
kafka
运维
你说通过Kafka AdminClient获取Lag会有性能问题?尊嘟假嘟0.o
0.前言前阵子团队里出了个大故障,本质是因为其他语言实现的client有问题,非常频繁的请求大量元数据,而Kafka服务端这边也没有做什么限制,导致Kafka
Broker
宕了。
·
2025-01-21 03:31
javakafka大数据
程序员必须掌握的消息中间件-RabbitMQ
特点:开源、性能优秀Erlang语言最初用在交换机的架构模式,这样使得RabbitMQ在
Broker
之间进行数据交互的性能时非常优秀的。Erlang的优点:Erlang有着和原生Socket一样
·
2025-01-19 23:36
后端
rocketmq的启动关闭
root@dailybluebin]#nohupshmqnamesrv&检查日志:[root@dailybluebin]#tail-f~/logs/rocketmqlogs/namesrv.log2.启动
Broker
nohupshmq
broker
-c
chen_zi_
·
2025-01-19 23:24
rocketmq
linux
服务器
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他