E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BROKER
rabbitmq可靠性投递_RabbitMQ生产端消息可靠性投递方案分析
Server:又称之为
Broker
,接受客户端的连接,实现AMQP实体服务。Connection:连接,应用程序与
Broker
的网络连接。
weixin_39786850
·
2025-02-10 04:34
rabbitmq可靠性投递
Oracle Data Guard 快速启动故障切换指南
本指南对您的现有环境做出几个假设,并且包括创建物理备用服务器和DataGuard
Broker
配置的示例。要开始本指南,您只需Oracle数据
dqw120
·
2025-02-09 20:04
oracle
数据库
database
archive
system
测试
Kafka服务端配置
server.properties–服务端配置producer.properties–生产端配置consumer.properties–消费端配置这里主要介绍服务端server.properties#指定kafka集群中
broker
yaoleic
·
2025-02-09 18:52
消息队列
celery rabbitmq内存异常排查过程及内存组成解析
现象celery在用rabbitmq集群当
broker
的时候,经常会出现rabbitmq某个节点内存爆满的问题。
「已注销」
·
2025-02-08 12:11
rabbitmq
rabbitmq
celery
内存异常
镜像队列
broker
【编程简史:Eclipse 之物联网】
它们在MQTT生态系统中扮演着不同的角色:EclipseMosquitto:一个轻量级的MQTT
Broker
,负责接收、处理和转发MQTT消息。它是服务器端的组件,管理客户端之间的消息传递。
wn531
·
2025-02-08 11:02
eclipse
物联网
java
开源
程序人生
kafka 集群为什么依赖 zookeeper ?
具体来说,ZooKeeper在Kafka集群中主要起到以下几个作用:1.管理集群元数据ZooKeeper存储和管理Kafka集群的元数据信息,包括
Broker
信息、Topic信息、Partition信息和
将臣三代
·
2025-02-08 10:55
kafka
zookeeper
分布式
Kafka:学习Kafka如何保证可靠性
需要的同学请移步至老周的文章,我这边只作为自己学习和记录的备份二、Producer往
Broker
发送消息如果我们要往Kafka对应的主题发送消息,我们需要通过Producer完成。
·
2025-02-07 22:18
kafka
Kafka源码解剖
分区的数据会获取集群元数据注册
broker
信息,并通过RecordAccumulator缓存池创建对应的Sender的线程,在该线程中会将请求封装成一个batch,最后在把整个batch数据发送到
broker
纸短情长恋曲
·
2025-02-07 06:45
kafka
大数据
java
图解 Kafka 网络层源码实现机制之收发消息全过程
剖析Kafka封装的Selector是如何初始化并与
Broker
进行连接
炫酷盖茨猫先生
·
2025-02-07 05:14
后端
kafka
java
大数据
分布式
数据库
你说通过Kafka AdminClient获取Lag会有性能问题?尊嘟假嘟0.o
0.前言前阵子团队里出了个大故障,本质是因为其他语言实现的client有问题,非常频繁的请求大量元数据,而Kafka服务端这边也没有做什么限制,导致Kafka
Broker
宕了。
·
2025-02-06 13:04
javakafka大数据
kafka-eagle-2.0.3:Note: Kafka version is - or JMX Port is -1 maybe kafka
broker
jmxport disable.
kafka-eagle-2.0.3无法获取kafka集群信息kafka开启JMX,这样就可以通过kafka-eagle查看kafka集群状态。解决方法一:修改kafka-run-class.sh脚本,第一行增加JMX_PORT=9988即可。vim/moudle/kafka-2.6/bin/kafka-run-class.shJMX_PORT=9988解决方法二:启动kafka时增加JMX_POR
快乐骑行^_^
·
2025-02-06 06:42
大数据
kafka-eagle
rocketmq集群启动和下线
启动nameservernohupshbin/mqnamesrv&tail-f~/logs/rocketmqlogs/namesrv.log启动
broker
nohupshbin/mq
broker
-nlocalhost
小虾米 ~
·
2025-02-06 03:39
RocketMQ
rocketmq
Kafka的安装及相关操作命令
文章目录前言一、安装kafka1.下载kafka2.解压kafka3.配置环境变量二、kafka相关命令1.启动zk2.启动Kafka
Broker
3.创建主题4.列出所有主题5.查看主题详情6.删除主题
凡许真
·
2025-02-05 23:41
kafka
0.10.2.1
操作命令
mac
单机版
kafka的高可用情况下,挂掉一个节点,为什么消费者消费不到数据了
1.假设有kafka集群,3个
broker
kafka集群kafka01kafka02kafka032.创建topictest(分区3副本3)kafka-topics.sh--create--topic'test
黄土高坡上的独孤前辈
·
2025-02-05 21:55
Kafka
Rocketmq 面试题
1.结构及工作原理RocketMQ的整体工作原理围绕着生产者、消费者、
Broker
和NameServer四个核心组件展开。其消息的发送、存储、消费,以及路由发现的过程,形成了完整的工作流。
信徒_
·
2025-02-05 19:44
rocketmq
MQTT 术语表
Broker
有时我们也会直接将服务端称为
Broker
,这两个术语可以互换使用。CleanStart客户端可以在连接时使用这个字段来指示是期望从已存在的会话中恢复通信,还是创建一个全新的会话。
能源革命
·
2025-02-05 13:32
MQTT
IoT
技术
物联网
IoT
mqtt
Kafka SSL(TLS)安全协议
KafkaSSL的作用1.1数据加密1.2身份认证1.3数据完整性1.4防止中间人攻击1.5确保安全的分布式环境1.6防止拒绝服务(DoS)攻击2.KafkaSSL配置步骤(1)创建SSL证书(2)Kafka
Broker
王多鱼的梦想~
·
2025-02-04 21:06
Kafka修炼手册
kafka
ssl
安全
唠唠 RDS 那些事 ——RDS 服务部署
RDS服务包括以下的核心组件:RDCB——RemoteDesktopConnection
Broker
,远程桌面连接代理。RDWA——RemoteDesktopWebAccess,远程桌面Web访问。
SimminonGarcia
·
2025-02-04 07:09
运维
Kafka 单机和集群环境部署教程
ZooKeeper3.2配置ZooKeeper3.3启动ZooKeeper3.4验证ZooKeeper是否正常运行4.安装Kafka4.1下载并解压Kafka4.2配置Kafka4.3创建日志目录4.4启动Kafka
Broker
4.5
闲人编程
·
2025-02-03 03:54
大数据集群部署教程
kafka
分布式
集群
部署
单机
zookeeper
【技海登峰】Kafka漫谈系列(一)Kafka服务集群的核心组件
【技海登峰】Kafka漫谈系列(一)Kafka服务端的核心组件一.
Broker
完整的Kafka服务是集群Cluster结构,其由多个Kafka服务节点组成,每个物理节点即称为
Broker
,在实际部署中,
阿阿阿安
·
2025-02-02 13:49
【独家专栏】知识星球同步
专享优质好文
kafka
分布式
java
RabbitMQ高级特性 - 非持久化 / 持久化(交换机、队列、消息)
持久化机制概述实现非持久化(交换机、队列、消息)实现持久化(交换机、队列、消息)RabbitMQ持久化机制概述前面讲到了生产者消息确认机制和消费者消息确认机制,保证了消息传输的可靠性,但是这还不够,试想如果
Broker
陈亦康
·
2025-02-02 08:35
面试总结
rabbitmq
ruby
分布式
为AI聊天工具添加一个知识系统 之30 概念整体运营平台:中间架构层的
broker
service的API模型
本文要点本项目(为AI聊天工具增加知识系统)通过完善“公路”的整体概念框架最终(在外部)为三类公共运营性交通工具((高速-轿车taxi/中速--公交车bus/低速-卡车truck))提供运营平台。该平台对内通过明确交通路线上的三种“端”(end/stop/start)的一般术语框架作为程序的形式化规则起点,并全过程指导最终朝向形式化的每一个步骤的设计、实现和部署(自动化程度不同:人工,半自动化,完
一水鉴天
·
2025-02-02 07:57
智能制造
人工语言
软件智能
人工智能
【面试题】简述rabbitmq的组织架构
@[面试题]简述rabbitmq的组织架构RabbitMQ是一种流行的消息中间件,其架构设计围绕消息生产者,消息消费者和消息中转(
Broker
)展开。
土掉渣的二傻子
·
2025-02-01 12:10
rabbitmq
架构
分布式
python
【Proxy
Broker
】用Python打破网络限制的利器
Proxy
Broker
1.什么是Proxy
Broker
2.Proxy
Broker
的功能3.Proxy
Broker
的优势4.Proxy
Broker
的使用方法5.Proxy
Broker
的应用场景6.结语项目地址
山河不见老
·
2025-02-01 07:34
python
python
开发语言
中间件 | RocketMq - [
broker
配置]
INDEX
broker
.conf
broker
.conf干货见注释###集群名
broker
ClusterName=DefaultCluster###nameserver#nameserver地址namesrvAddr
问仙长何方蓬莱
·
2025-01-31 23:56
中间件
rocketmq
RocketMQ的集群架构是怎样的
RocketMQ的集群架构包括四个主要角色:NameServer集群、
Broker
主从集群、Producer和Consumer客户端。
还能在学一小时
·
2025-01-31 22:46
十七
Rocketmq
java-rocketmq
rocketmq
架构
【RocketMQ 存储】-
broker
端存储批量消息的逻辑
文章目录1.前言2.DefaultMessageStore#asyncPutMessages批量新增消息2.1Commit#asyncPutMessages2.2Commit#encode批量编码消息2.3MappedFile#appendMessages添加批量消息2.4MappedFile#appendMessagesInner添加批量消息2.5CommitLog#doAppend3.小结本文
月幻星影
·
2025-01-31 12:18
源码分析
RocketMQ
java-rocketmq
rocketmq
消息存储
Kafka 压缩算法详细介绍
文章目录一、Kafka压缩算法概述二、Kafka压缩的作用2.1降低网络带宽消耗2.2提高Kafka生产者和消费者吞吐量2.3减少Kafka磁盘存储占用2.4减少Kafka
Broker
负载2.5降低跨数据中心同步成本三
王多鱼的梦想~
·
2025-01-31 02:22
kafka
分布式
运维
apache
【SpringCloud微服务实战08】RabbitMQ 消息队列
无需等待订阅者处理完成,响应更快速故障隔离:服务没有直接调用,不存在级联失败问题调用间没有阻塞,不会造成无效的资源占用耦合度极低,每个服务都可以灵活插拔,可替换流量削峰:不管发布事件的流量波动多大,都由
Broker
李维山
·
2025-01-31 00:05
MQ实战
Java
rabbitmq
spring
cloud
spring
boot
基础渗透测试实验—永恒之蓝漏洞复现
4.2复现过程:1.查看上线主机2.使用Metasploit(MSF)工具3.选择一个编码技术,用来绕过杀毒软件的查杀4.远程控制目标机缓解措施概述永恒之蓝是指2017年4月14日晚,黑客团体Shadow
Broker
s
锅盖'awa'
·
2025-01-30 12:55
网络安全小白之路
linux
windows
系统安全
安全性测试
Kafka原理总结
Kafka是一个开源的分布式流式处理平台,在这个平台上可以发布、订阅以及处理数据流,具有强大的吞吐能力,让Kafka成为了一个高性能的发布与订阅消息系统一:概念理解
Broker
部署Kafka进程的服务被称之为
DEMOAHUI
·
2025-01-30 10:08
mq中间件
kafka
rocketmq python 某个队列不消费_RocketMQ消息发送常见错误与解决方案
1、Norouteinfoofthistopic无法找到路由信息,其完整的错误堆栈信息如下:而且很多读者朋友会说
Broker
端开启了自动创建主题也会出现上述问题。
weixin_39849479
·
2025-01-30 04:28
rocketmq
python
某个队列不消费
RocketMQ 系列文章
RocketMQ的Topic和消息队列MessageQueue信息,是怎么分布到
Broker
的?怎么负载均衡到
Broker
的?NameServer在RocketM
点滴~
·
2025-01-29 00:48
rocketmq
从建表语句带你学习doris_数据类型
column_definition1[,column_deinition2,......][,index_definition1,[,index_definition2,]])[ENGINE=[olap|mysql|
broker
圣·杰克船长
·
2025-01-28 23:09
doris
数据类型
分布式微服务系统架构第88集:kafka集群
需要多少个
broker
一个Kafka集群需要多少个
broker
取决于以下几个因素。首先,需要多少磁盘空间来保留数据,以及单个
broker
有多少空间可用。
掘金-我是哪吒
·
2025-01-28 18:27
分布式
微服务
系统架构
kafka
架构
【MQ】如何保证消息队列的高可用?
RocketMQNameServer集群部署
Broker
做了集群部署主从模式类型:同步复制、异步复制主节点返回消息给客户端的时候是否需要同步从节点Dledger:要求至少消息复制到半数以上的节点之后,才给客户端返回写入成功
Forest 森林
·
2025-01-28 09:24
消息队列
MQ
kafka
MQ和多线程异步有什么区别?
当业务系统处于高并发,MQ可以将消息堆积在
Broker
实例中,而多线程会创建大量线程,甚
大唐雨夜
·
2025-01-28 04:17
分布式
java
分布式
经验分享
doris: CSV导入数据
导入方式Doris支持以下方式导入CSV格式数据:StreamLoad
Broker
LoadRoutineLoadMySQLLoadINSERTINTOFROMS3TVFINSERTINTOFROMHDFSTVF
向阳1218
·
2025-01-27 16:56
大数据
doris
corba学习笔记
CORBA公用对象请求代理(调度)程序体系结构(CommonObjectRequest
Broker
Architecture),缩写为CORBA,是对象管理组织(ObjectManagementGroup
一枚前端猿
·
2025-01-27 15:44
RocketMQ源码分析之ACL
文章目录前言一、ACL介绍二、ACL源码分析1.
broker
在启动时如何启用ACL?2.客户端向
broker
端发送请求时都有哪些ACL方面的操作?3.
broker
收到客户端发送的请求后如何处理?
不爱学习的小妞
·
2025-01-27 02:23
rocketmq学习笔记
kafka-保姆级配置说明(consumer)
请求返回时,至少获取的字节数,默认值为1##当数据量不足时,客户端请求将会阻塞##此值越大,客户端请求阻塞的时间越长,这取决于producer生产效率和网络传输能力fetch.min.bytes=1##如果
broker
xiao-xiang
·
2025-01-26 20:11
kafka
kafka
分布式
简述kafka生产者ack确认机制
一、总结该章节主要探讨造成数据丢失问题生产者ack确认机制(目的是要有多少个分区副本收到消息,生产者才认为该消息写入成功;acks参数对数据是否丢失起重要的作用)(1)ack=0,就是表示生产者不会和
broker
技匠三石弟弟
·
2025-01-26 20:35
数据开发
kafka
Kafka 生产者中的ack的配置
此时ack有3个配置:1.ack=0kafka-cluster不需要任何的
broker
收到消息,就⽴即返回ack给⽣产者,最容易丢消息的,效率是最⾼的2.ack=1(默认):多副本之间的leader已经收到消息
欧阳冰轩
·
2025-01-26 20:04
Kafka
kafka
分布式
RabbitMQ 死信队列详解
一般来说,Producer将消息投递到
Broker
或者直接到Queue里了,Consumer从Queue取出消息进行消费,但某些时候由于特定的原因导致Queue中的某些消息无法被消费,这样的消息如果没有后续的处理
web18484626332
·
2025-01-26 19:02
面试
学习路线
阿里巴巴
android
前端
后端
doris:ORC
支持的导入方式以下导入方式支持ORC格式的数据导入:StreamLoad
Broker
LoadINSERTINTOFROMS3TVFINSERTINTOFROMHDFSTVF使用示例本节展示了不同导入方式下的
向阳1218
·
2025-01-26 19:30
大数据
doris
【53】Camunda8-Zeebe核心引擎-Partitions分区与Internal processing内部处理
在
broker
集群中,分区分布在节点之间,因此可以将其视为分片。启动/初始化Zeebe集群时,用户可以配置所需的分区数。如果使用过Kafka,这部分内容是比较相似的。
AlieNeny
·
2025-01-26 18:25
Camunda
camunda8
流程引擎
zeebe
partitions
分区
【48】Camunda8-Self-Managed部署
Camunda8Self-Managed主要包括以下服务/组件:Zeebe
Broker
andGatewayOperateTasklistConnectorsOptimizeIdentityWebModeler
AlieNeny
·
2025-01-26 18:55
Camunda
camunda
camunda8
环境安装
Self-Managed
Kafka生产者ACK参数与同步复制
目录生产者的ACK参数ack等于0ack等于1(默认)ack等于-1或allKafka的同步复制使用误区生产者的ACK参数Kafka的ack机制可以保证生产者发送的消息被
broker
接收成功。
WannaRunning
·
2025-01-26 18:24
kafka
分布式
RabbitMQ 架构分析
文章目录前言一、RabbitMQ架构分析1、
Broker
2、Vhost3、Producer4、Messages5、Connections6、Channel7、Exchange7、Queue8、Consumer
DREAM LINER SU
·
2025-01-26 09:49
rabbitmq
架构
ruby
java
分布式
Kafka 2.2.0 消息日志清理机制:日志删除 日志压缩
在了解日志清理机制之前,请先了解日志存储方式Kafka有两种日志清理策略:日志删除:按照保留策略删除日志分段需要将
Broker
端参数log.cleanup.policy设置为delete(默认值)日志压缩
A__Plus
·
2025-01-26 06:17
kafka
Kafka
消息队列
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他