E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Broker
RocketMq
RocketMq中的角色2.1nameSpaceNameServer是整个RocketMQ的“大脑”,它是RocketMQ的服务注册中心,所以RocketMQ需要先启NameServer再启动Rocket中的
Broker
NPE1
·
2023-10-24 23:12
rocketmq
【RocketMQ】数据的清理机制
Broker
在启动的时候会注册定时任务,定时清理过期的数据,默认是每10s执行一次,分别清理CommitLog文件和ConsumeQueue文件:publicclassDefaultMessageStoreimplementsMessageStore
S_H-A_N
·
2023-10-24 23:10
RocketMQ
1024程序员节
rocketmq
springboot实战(十)之全网最全RabbitMQ集成
1.介绍官网介绍:RabbitMQisthemostwidelydeployedopensourcemessage
broker
.(RabbitM
悟空、大师兄
·
2023-10-24 18:11
java-rabbitmq
spring
boot
rabbitmq
高并发环境下,解决多线程线程安全和数据顺序性问题
1、场景从数据源kafka接收到多个topic(多种类型的)数据,(比如某个商品goods的交易订单trade,交易金额数据
broker
,交易店铺order,交易历史stock情况)然后将数据收集,再由多线程使用
Java小许
·
2023-10-24 16:10
消息队列
kafka
websocket
数据结构
对“观察者模式”和“订阅发布模式”的理解
具体含义不介绍,只谈谈自己的理解,如有理解错误请指出:对比图订阅发布模式比观察者模式多一步,叫做
Broker
(经纪人)观察者模式的实际应用:Spring的ApplicationEvent和ApplicationListenerSpring
邮差在行动
·
2023-10-24 13:24
Kafka 自动配置部署信息的脚本记录
basePath=$1
broker
Id=$2zookeeperConnect=$3localIp=`ifconfig|grepinet|awk'{print$2}'|head-1`echo$localIpcd
毕小宝
·
2023-10-24 08:34
kafka
分布式
poj 图论题目分类
2分图染色+DP1125Stock
broker
GrapevineFLOYD1135DominoEffect最短路1149*PIGS网络流1161*Wallsfloyd1201Intervals差分约束1236
狼血wolfblood
·
2023-10-24 02:38
ACM
poj
算法
图论
搜索
acm
poj 图论题目分类(转载)
2分图染色+DP1125Stock
broker
GrapevineFLOYD1135DominoEffect最短路1149*PIGS网络流1161*Walls
yrleep
·
2023-10-24 02:07
ACM
POJ题目分类
2分图染色+DP1125Stock
broker
GrapevineFLOYD1135DominoEffect最短路1149*PIGS网络流1161*Wallsfloyd1201Intervals差分约束1
whn757397540
·
2023-10-24 02:37
POJ图论分类
2分图染色+DP1125Stock
broker
GrapevineFLOYD1135DominoEffect最短路1149*PIGS网络流1161*Wallsfloyd1201Intervals差分约束1236
YDYKL
·
2023-10-24 02:01
其他
network
intervals
网络
graph
construction
算法
个人笔记-Rabbit MQ 连接失败
问题连接RabbitMQ时,出现如下错误:NoneofthespecifiedendpointswerereachablevhostxxxxnotfoundDotNetCore.CAP.
Broker
ConnectionException
David.X.Wu
·
2023-10-24 01:08
个人笔记
rabbitmq
Windows下RabbitMQ远程连接登录失败的问题解决
com.rabbitmq.client.AuthenticationFailureException:ACCESS_REFUSED-LoginwasrefusedusingauthenticationmechanismPLAIN.Fordetailsseethe
broker
logfile
m0_67392126
·
2023-10-24 01:31
java
java
后端
Doris系列14-数据导入之批量删除
文章目录一.批量删除概述1.1原理1.2读取1.3CumulativeCompaction1.4BaseCompaction1.5语法二.启用批量删除支持参考:一.批量删除概述目前Doris支持
broker
load
只是甲
·
2023-10-23 22:53
大数据和数据仓库
#
Doris
Doris批量删除
Doris数据删除
Doris删除
Apache Doris 入门教程09:数据导入之导入场景
按场景划分数据源导入方式对象存储(s3),HDFS使用
Broker
导入数据本地文件导入本地数据Kafka订阅Kafka数据Mysql、PostgreSQL,Oracle,SQLServer通过外部表同步数据通过
sunjian286
·
2023-10-23 22:23
apache
数据仓库
大数据
kafka
mysql
Words book
Phraseinfullviewofsb.Explain:sothatallthepeopleinaplacecansee,especiallywhenthisisembarrassingorshockingReporterWho
BrokeR
.KellyStory
sharyyy
·
2023-10-23 20:26
Adjusted frame length exceeds 1677216:16777318-discarded
问题背景消息队列的nameser和
broker
运行后,在console无法显示,进入
broker
.log,namesrv.log显示如下报错Adjustedframelengthexceeds1677216
冰川_
·
2023-10-23 16:58
RocketMQ
java-rocketmq
一些kafka的面试题
为单位进行归纳将向Kafkatopic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行,可以由一一个或多个服务组成,每个服务叫做一个
broker
.producers
农哥小鹏
·
2023-10-23 16:38
k8s添加自定义DNS解析
1、需要要添加的自定义解析10.0.21.22rocketmq-
broker
as10.0.21.21rocketmq-
broker
bs10.0.21.20rocketmq-
broker
a10.0.21.25rocketmq-
broker
bpingrocketmq-
broker
as
奔跑的大白兔
·
2023-10-23 13:43
k8s
kubernetes
容器
大数据日志传输之Kafka实战教程
大数据日志传输之Kafka实战本套课程围绕Kafka架构详细讲解kafka的核心架构组件,
broker
,consumer,producer,以及日志的分段存储,稀疏索引,副本平衡,重分区,数据同步,Kafka
weixin_34279184
·
2023-10-23 07:53
大数据
java
KafKa 分区,副本实战
一主多从5个
broker
(1主4从)安装目路/config/server.properties,额外复制4份为server-2.properties,server-3.properties,server
大头河
·
2023-10-23 05:38
kafka
分布式
kafka分区副本机制
副本处于不同的
broker
中,当leader副本出现故障时,从follower副本中重新选举新的leader副本对外
波波仔86
·
2023-10-23 05:07
kafka
kafka分区副本机制
MicroPython的MQTT实现(asyncio协程版)
micropython/micropython-lib/tree/master/umqtt.simple二、免费MQTT测试服务器https://www.emqx.cn/mqtt/public-mqtt5-
broker
https
鲲鹏混子鱼
·
2023-10-23 03:27
树莓派
MicroPython
github
python
自动驾驶
机器学习
pytorch
Connection to node 0 (windows10.microdone.cn/192.168.1.4:9092) could not be established.
Windows下Kafka报错:Connectiontonode0(windows10.microdone.cn/192.168.1.4:9092)couldnotbeestablished.
Broker
maynotbeavailable
yeeanna
·
2023-10-23 02:51
java
linux 下搭建rokectMQ集群
https://github.com/alibaba/RocketMQ/releases/tag/v3.4.6用三台机器搭建集群,3namesrv、3master、3slave:ip1nameSrv1
broker
-a
broker
-c-sip2nameSrv2
broker
-a-s
broker
-bip3nameSrv3
broker
-b-s
broker
-c
逃离魔爪
·
2023-10-22 22:30
RocketMQ NameServer 原理分析
NameServer中维护着Producer集群、
Broker
集群、Consumer集群的服务状态。通过定时发送心跳数据包进行维护更新各个服务的状态。当有新的Producer加入集群时,通过上报
jijs
·
2023-10-22 15:49
Kafka Consumer开发
一个或多个消费者订阅kafka集群中的topic,并从
broker
接收topic消息,从而进行业务处理。今天来学习下kafkaconsumer基本使用。
u013433591
·
2023-10-22 15:11
KAFKA
kafka消费者
kafka拉取模式
kafka框架
14057057kafka概述消息队列的两种模式1)点对点模式(一对一,消费者主动拉取数据,消息收到后消息清除)2)发布/订阅模式(一对多,消费者消费数据之后不会清除消息)(1)Producer:消息生产者,就是向kafka
broker
DSJ_ kohler
·
2023-10-22 13:23
大数据日常记录
kafka
队列
分布式
hadoop
大数据之Kafka介绍及使用
Kafka的架构Kafka的架构由以下几个组件组成:
Broker
:Kafka集群中的每个节点都是一个
Broker
,它们负责接收和处理消息。Topic:
蓝胖子的宝贝
·
2023-10-22 10:48
大数据技术分享
kafka
大数据
分布式
大数据技术之Kafka
传统消息队列的应用场景1.2.2消息队列的两种模式1.3Kafka基础架构第2章Kafka生产者2.1生产者消息发送流程2.2生产者分区2.3生产者发送消息的分区策略2.4数据可靠性(去重)第3章Kafka
Broker
3.1Kafka
Broker
Red-P
·
2023-10-22 10:16
大数据基础
Kafka
kafka
大数据
RocketMQ消息丢失解决方案:同步刷盘+手动提交
因为虽然我们解决了生产者发送消息时候的消息丢失问题,但也只是保证
Broker
正确的接收到了消息,实际上接收到的消息会保存在oscache中,如果此时
broker
机器突然宕机,oscache中的消息数据就丢失掉了
H-U-C王子
·
2023-10-22 10:49
消息队列
java
springboot集成rocketmq,实现普通消息、顺序消息、延迟消息、事物消息
安装:RocketMQ详细安装教程(RocketMQ安装、RocketMQ修改默认端口、console管理后台安装)_Xd聊架构的博客-CSDN博客1.
broker
.conf配置
broker
ClusterName
晨一更
·
2023-10-22 10:46
MQ
java
开发语言
rocketmq
基于 Docker 安装 RocketMQ
注意:启动RocketMQServer+
Broker
+Console至少需要2G内存docker-compose.ymlversion:'3.5'services:rmqnamesrv:image:foxiswho
isuntong
·
2023-10-22 09:38
Kafka的分区模型
kafka集群由多个消息代理服务器(
broker
server)组成,发布到kafka集群的每条消息都有一个类别(topic)。
挽袖清风_32dc
·
2023-10-22 06:07
常用消息中间件
同时实现了
Broker
架构,核心思想是生产者不会将消息直接发送给队列,消息在发送给客户端时先在中心队列排队。对路由(Routing),负载均衡(
xmh-sxh-1314
·
2023-10-22 03:45
java
如何用工业树莓派和MQTT平台打通OT和IT?
宏集HiveMQ将PC端配置为MQTT
Broker
;工业树莓派可通过MQTT协
宏集科技工业物联网
·
2023-10-21 12:30
MQTT
虹科工业物联网
虹科工业级树莓派
工业物联网
工业自动化
工业树莓派
MQTT
工业控制
IM - 核心功能之分布式部署方案
(RabbitMQ集群对带宽的依赖程度,尚未明确,需要测试)因此,引入
Broker
,解决跨
红薯爱帅
·
2023-10-21 11:44
消息中间件-RocketMq
windows下安装安装下载下载地址:http://rocketmq.apache.org/release_notes/release-notes-4.2.0/安装参考1安装参考2安装控制台启动运行如果
broker
Adda_Chen
·
2023-10-21 08:06
java-rocketmq
rocketmq
java
Kafka MS题总结
对于Kafka的
Broker
而言,Kafka的复制机制和分区的多副本架构是Kafka可靠性保证的核心Kafka如何保证生产一次性语义?
hehehehe
·
2023-10-20 18:55
Apache Pulsar 2.9.1单集群部署
并运行Function(可选)8.分发apache-pulsar-2.9.1(pulsar1上)9.初始化集群元数据(pulsar1)10.运行(3台服务器)10.1启动Bookeeper10.2启动
broker
1
Bulut0907
·
2023-10-20 17:22
Apache
Pulsar
apache
pulsar
分层储存
连接器
pulsar
function
2.9.1
Pulsar Manager和dashboard部署和启用认证
可用于管理和监测租户、命名空间、topic、订阅、
broker
、集群等。Pulsardashboard目前已被弃用Linu
beyond阿亮
·
2023-10-20 17:51
mq
pulsar
manager
dashboard
Pulsar集群和PulsarManager添加JWT认证
Pulsar集群和PulsarManager添加JWT认证一、Pulsar添加JWT认证1.生成秘钥对2.生成用于超级管理员的token3.生成给测试用户的token4.配置集群
broker
的
broker
.conf5
酱紫很帅
·
2023-10-20 16:47
Pulsar
大数据
pulsar-admin tenants list返回HTTP 401 Unauthorized
在pulsar后台节点使用命令查询租户列表时返回401#bin/pulsar-admintenantslistHTTP401Unauthorized查看
broker
.conf发现开启了权限认证#cat/
Dyeln
·
2023-10-20 16:44
list
http
linux
Kafka SASL安全认证机制与ACL用户权限控制
认证KafkaSASL的认证范围包含如下:Client与
Broker
之间
Broker
与
Broker
之间
Broker
与Z
PONY LEE
·
2023-10-20 13:37
kafka
kafka
安全
运维
Kafka2.6版本权限认证
信道加密就是为client到
broker
、
broker
到
broker
以及工具脚本与
broker
之间的数据传输配置SSL;认证机制主要是指配置SASL,而受权是经过ACL接口命令来完成的。
zhaojinweiwei
·
2023-10-20 13:37
kafka
Kerberos安全认证-连载7-大数据技术组件之搭建Kafka集群
32020645/article/details/1310812461.节点划分这里选择Kafka版本为3.3.1,对应的搭建节点如下:节点IP节点名称Kafka服务192.168.179.4node1kafka
broker
192.168.179
IT贫道
·
2023-10-20 13:36
Kerberos安全认证
大数据
安全
kafka
3、Kafka
Broker
4.1Kafka
Broker
工作流程4.1.1Zookeeper存储的Kafka信息(1)启动Zookeeper客户端。
myprince003
·
2023-10-20 11:09
Kafka
kafka
分布式
kafka生产者和消费者
发送原理生产者重要参数列表生产者命令行操作1、查看操作生产者命令参数[atguigu@hadoop102kafka]$bin/kafka-console-producer.sh参数描述--bootstrap-server连接的Kafka
Broker
笨鸟先-森
·
2023-10-20 10:05
kafka
分布式
java
2、Kafka 生产者
main线程将消息发送给RecordAccumulator,Sender线程不断从RecordAccumulator中拉取消息发送到Kafka
Broker
。
myprince003
·
2023-10-20 10:56
Kafka
kafka
分布式
kafka消费者的group id从哪里获取
消费者拉取
broker
的消息时需要指定groupid,而生产者将消息发送到
broker
的时候并不会指定groupid,那么消费者的groupid从哪里获取呢?
邓不利东
·
2023-10-20 02:09
kafka
kafka
分布式
中间件
java
Apache Doris && Kafka
Kafka硬件配置选择Kafka生产者Kafka
Broker
Kafka消费者Kafka总体针对Kafka3.0.0Kafka传统定义:分布式的基于发布订阅的消息队列MessageQueue。
wqy19941008
·
2023-10-20 00:03
学习总结
kafka
java
分布式
上一页
23
24
25
26
27
28
29
30
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他