E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BROKER
大数据 - Kafka系列《一》- Kafka基本概念
1.1什么是kafka1.2Kafka可以用来做什么1.3kafka的特点1.高吞吐量、低延迟2.可扩展性3.持久性、可靠性4.容错性5.高并发1.4Kafka的基本架构1.Producer:生产者2.
Broker
王哪跑nn
·
2024-01-18 15:05
kafka
大数据
大数据
kafka
分布式
外汇天眼:交互经纪公司在2023财年第四季度的营收上升!
电子交易主要参与者Interactive
Broker
sGroup,Inc.(NASDAQ:IBKR)宣布了截至2023年12月31日的季度业绩。
WAIHUI_tianyan
·
2024-01-18 14:40
人工智能
大数据
金融
区块链
业界资讯
html+js网页连接MQTT服务器new Paho.MQTT.Client
网页完整代码示例Document简单测试client=newPaho.MQTT.Client("
broker
.emqx.io",Number(8083),"websockets-test");//建立客户端实例
小鱼小鱼干
·
2024-01-18 11:50
javascript
html
服务器
代理服务器(
Broker
)的Master-Slave 架构
在消息队列系统中,代理服务器(
Broker
)的架构可以采用Master-Slave架构,但并不是所有消息队列系统都使用这种架构。
heartfluttering
·
2024-01-18 08:06
java开发
架构
后端
消息队列
关于调优
操作系统调优句柄、swapiness、文件系统、网络IOJVM调优合理设置堆大小、合理选择GC收集器
Broker
调优尽力保持客户端版本和
Broker
端版本一致、合理配置参数应用层不要频繁地创建Producer
kar_joe
·
2024-01-18 01:20
【Kafka每日一问】Kafka的高可用机制是什么?
1.副本(Replication)副本因子:当创建一个KafkaTopic时,可以指定副本因子,这个因子决定了每个分区会有多少个副本存储在不同的
broker
上。
jianjun_fei
·
2024-01-18 00:23
Kafka每日一问
kafka
分布式
关于kafka中的tcp连接
生产者建立连接时机启动在创建KafkaProducer实例时,生产者应用会在后台创建并启动一个名为Sender的线程,该Sender线程开始运行时首先会创建与
Broker
的连接。
kar_joe
·
2024-01-17 12:35
RabbitMQ
RabbitMQ1.1RabbitMQ的特点1.2RabbitMQ基本概念1.3工作模式1.4RabbitMQ详细概念1.4.1Exchange(交换器)1.4.2Binding(绑定)1.4.3Queue(消息队列)1.4.4
Broker
解梦者
·
2024-01-17 11:25
【综合】
rabbitmq
分布式
docker-compose 安装RocketMq
文章目录一、创建docker文件夹二、在rocketmq文件夹下创建docker-compose.yml文件三、
broker
conf下新建
broker
.conf文件并存储四、保存上边配置,执行docker-compose
落魄实习生
·
2024-01-17 10:00
MQ
linux
docker
rocketmq
容器
Kafka 简介
目录1、概念介绍Kafka由来ZooKeeperKafka特性Kafka使用场景Kafka复制备份2、Kafka架构
Broker
TopicProducerPartitionConsumersConsumerGroupDistribution1
HuaLuLemon
·
2024-01-17 07:03
Kafka
kafka
分布式
Kafka 集群部署
集群配置文件节点标记环境变量启动集群数据同步测试故障测试3、搭建Kafka集群配置文件环境变量配置其他机器启动服务4、集群测试创建Topic显示Topic配置创建Producer创建consumer删除Topic查看Zookeeper元数据一个
Broker
HuaLuLemon
·
2024-01-17 07:03
Kafka
kafka
分布式
RocketMQ源码阅读-Message拉取与消费-
Broker
篇
RocketMQ源码阅读-Message拉取与消费-
Broker
篇1.ConsumeQueue是什么2.Message重放2.1从MappedFile文件读取Message到ConsumeQueue2.2ConsumeQueue
迷思特王
·
2024-01-17 04:42
RocketMQ源码阅读
java-rocketmq
rocketmq
java
无标题文章
rocketmq.apache.orgGitHubhttps://github.com/apache/rocketmqQuickStartLinux下使用Maven编译源码安装Rocketmq4.6+需要jdk1.8环境编译和运行VersionClient
Broker
NameServer4.0.0
A_ef3a
·
2024-01-17 01:41
「Kafka」
Broker
篇
「Kafka」
Broker
篇主要讲解的是在Kafka中是怎么存储数据的,以及Kafka和Zookeeper之间如何进行数据沟通的。
小成同学_
·
2024-01-16 21:44
Kafka
kafka
分布式
java
后端
中间件
Kafka系列(一)
组件概念
broker
一个Kafka的集群通常由多个
broker
组成,这样才能实现负载均衡、以及容错
broker
是无状态(Sateless)的,它们是通过ZooKeeper来维护集群状态一个Kafka的
broker
happystudy_neu
·
2024-01-16 10:20
kafka
分布式
Android使用MQTT订阅及发布消息((一)初步了解Mqtt以及实现Android操作mqtt服务)
初步了解Mqtt以及实现Android操作mqtt服务)关于MQTT介绍MQTT协议实现方式MQTT服务器MQTT协议中的订阅、主题、会话MQTT协议中的方法MQTT服务质量(QoS)MQTT服务端(
Broker
雪の星空朝酱
·
2024-01-16 09:05
研究
android
MQTT
kotlin
即时通讯
消息协议
Spring Boot中使用RabbitMQ
Message
Broker
与AMQP简介Message
Broker
是一种消息验证、传输、路由的架构模式,其设计目标主要应用于下面这些场景:消息路由到一个或多个目的地消息转化为其他的表现方式执行消息的聚集
豆奶快攻
·
2024-01-16 07:31
消息队列
Kafka部署及使用
kafka四个核心概念:producer、consumer、
broker
、topic启动zk下载zkzookeeper-3.4.5-cdh5.7.0.tar.gz解压:tar-zxvfzookeeper
Sx_Ren
·
2024-01-16 05:15
定位消息
寻找最新的offsetdefget_latest_offset():topic=f'{get_env_tag()}_
broker
_rateRule'_consumer=KafkaConsumer(bootstrap_servers
Mr韩_xianfeng
·
2024-01-16 03:37
Kafka 之生产者(Producer)
main线程将消息发送给RecordAccumulator,Sender线程不断从RecordAccumulator中拉取消息发送到Kafka
Broker
。
知其_所以然
·
2024-01-16 03:05
kafka
分布式
Kafka producer 解析
然后消息总得有地方存放啊,然后就有了具体的
broker
,那在
broker
上是如何进行组织和存放的,就出现了partition。
邹志全
·
2024-01-16 02:03
kafka和rocketMQ
数据可靠性kafka使用异步刷盘方式,异步ReplicationRocketMQ支持异步刷盘,同步刷盘,同步Replication,异步Replication2、严格的消息顺序Kafka支持消息顺序,但是一台
Broker
托盘毛毛
·
2024-01-15 23:02
消息中间件(RocketMQ、RabbitMQ、ActiveMQ、Redis、kafka、ZeroMQ)以及之间的区别
目录一、什么是消息中间件二、消息中间件的组成1、
Broker
2、Producer3、Consumer4、Topic5、Queue6、Message三、消息中间件通信模式1、点对点(kafka不支持这种模式
欢喜躲在眉梢里
·
2024-01-15 22:25
数据库
kafka
网络
中间件
Kafka的核心原理
index文件内容基本结构查询机制Kafka中生产者数据分发策略随机分发策略指定分区策略Hash取模策略自定义分区策略轮询分发策略和粘性分发策略Kafka消费者的负载均衡机制数据不丢失机制生产端保证消息不丢失
Broker
Sisi525693
·
2024-01-15 06:32
kafka
分布式
Kafka
KAFKAkafka集群
broker
kafka集群运行后,每台服务器上的kafka称为一个
broker
节点处理消费者和生成者的请求生产者需要保存数据到kafka,就需要请求
broker
消费者需要从kafka
中长跑路上crush
·
2024-01-15 06:02
Spark阶段
kafka
分布式
消息队列-RockMQ-消息的可靠性
单向发送:(不推荐使用):没有一定的保证机制来保证消息一定会投递到
Broker
;2储存阶段
Broker
突然Crash
njnu@liyong
·
2024-01-15 06:00
消息队列
消息队列
消息的可靠性
chromium通信系统-ipcz系统(八)-ipcz系统代码实现-跨Node通信-
Broker
和
Broker
通信
前面我们分析了
Broker
和Non
Broker
通信,也分析了Non
Broker
和Non
Broker
通信,这里我们分析一下
Broker
和
Broker
通信过程。
TangGeeA
·
2024-01-15 01:32
chromium
mojo
chromium
ipcz
chrome
rabbitmq
介绍1.1RabbitMQ简介1.2RabbitMQ核心概念1.2.1Producer(生产者)和Consumer(消费者)1.2.2Exchange(交换器)1.2.3Queue(消息队列)1.2.4
Broker
困兽犹斗z
·
2024-01-14 21:59
rabbitmq
java
分布式
RocketMQ源码阅读-Message消息存储
RocketMQ源码阅读-Message消息存储1.CommitLog的作用2.CommitLog存储消息3.时序图4.小结在
Broker
消息接收一篇中,分析到
Broker
接收到消息,最终会调用CommitLong
迷思特王
·
2024-01-14 18:38
rocketmq
RocketMQ源码阅读-
Broker
消息接收
RocketMQ源码阅读-
Broker
消息接收1.从单元测试入手2.
Broker
启动流程3.
Broker
接收消息4.
Broker
接收消息时序图5.小结
Broker
接收Producer发送的消息。
迷思特王
·
2024-01-14 18:07
RocketMQ源码阅读
rocketmq
log4j
RocketMQ源码阅读-Producer消息发送
Producer和Consummer对Rocket来说都是Client,Server是
Broker
。客户端在源码中是一个单独的Model,目录为rocketmq/client。
迷思特王
·
2024-01-14 18:06
RocketMQ源码阅读
log4j
rocketmq
HI3861学习笔记(24)——MQTT客户端
一、MQTT简介1.1实现方式实现MQTT协议需要客户端和服务器端通讯完成,在通讯过程中,MQTT协议中有三种身份:发布者(Publish)、代理(
Broker
)(服务器)、订阅者(Subscribe)
Leung_ManWah
·
2024-01-14 17:37
【环境搭建】RocketMQ集群搭建
其中嫖的朋友一个);版本:rocketmq-version:4.4.0rocketmq-console(mq控制台)Java:1.8maven:3.6.3集群模式选择:单master这种方式风险较大,一旦
Broker
xbhog
·
2024-01-14 13:10
环境搭建
java-rocketmq
rocketmq
java
CVE-2023-33246 RCE漏洞复现
CVE-2023-33246RCE漏洞复现漏洞描述在RocketMQ5.1.0及以下版本在一定条件下,会存在远程命令执行风险;由于RocketMQ的NameServer、
Broker
、Controller
七堇墨年
·
2024-01-14 13:34
CVE复现
网络
web安全
安全
[rocketmq] 如何保证消息可靠性
消息可能丢失的阶段1、生产者发送消息到
Broker
时;2、
Broker
内部存储消息到磁盘以及主从复制同步时;3、
Broker
把消息推送给消费者或者消费者主动拉取消息时;生产者发送消息:1.重试策略,发送消息失败后会进行一定的重试策略重试机制
荼白z
·
2024-01-14 11:35
java-rocketmq
rocketmq
java
SpringCloud:RabbitMQ兔子消息队列
也就是事件驱动架构中的
Broker
。同步通讯与异步通讯同步通讯同步调用的优
林小果1
·
2024-01-14 08:42
springcloud
spring
cloud
rabbitmq
ruby
java
后端
spring
RabbitMQ学习笔记
介绍名词解释
Broker
:接受和分发消息的应用,例如RabbitMQServerVirtualhost:出于多租户和安全因素设计的,把AMQP的基本组件划分到一个虚拟的分组中,类似于网络中的namespace
Loli_Wolf
·
2024-01-14 08:39
消息队列
rabbitmq
学习
笔记
spring
boot
spring
java
分布式
物理机部署三节点Kafka集群
downloads.html上传安装包到102的/opt/software目录下解压安装包到/opt/module/目录下,修改解压包名为kafka修改config目录下的配置文件server.properties内容#
broker
DIY……
·
2024-01-14 07:43
kafka
分布式
mqtt如何设置主题呢
在MQTT中,主题是一种由代理(
broker
)用来过滤消息的字符串。客户端发布(publish)消息到特定的主题,而其他客户端订阅(subscribe)这个主题来接收消息。
菌菌的快乐生活
·
2024-01-14 07:28
mqtt
在centos系统安装mqtt
在CentOS系统上安装MQTT,通常意味着要安装一个MQTT代理(
broker
),比如Mosquitto。
菌菌的快乐生活
·
2024-01-14 07:52
centos
linux
运维
RocketMQ5-02快速部署RocketMQ5.x(手动和容器部署)
RocketMQ5快速入门指南(含部署实践)部署环境本机单机可执行包部署、Docker部署Mac部署:下载源文件可执行包部署NameServer问题1:资源不足补充:关于日志的输出可执行包部署
Broker
c_zyer
·
2024-01-14 07:03
rocketmq
docker
运维部署
java-rocketmq
容器
大数据
RocketMQ5-03RocketMQ-Dashboard和Java客户端访问示例
就需要对这个环境进行测试,查看集群、写入消息、读取消息等本篇教你如何使用和查看部署的服务:Docker部署Dashboard获取镜像并下载部署服务客户端连接pom文件生产者代码消费者代码接口测试问题:
broker
c_zyer
·
2024-01-14 07:29
rocketmq
docker
javaweb
java-rocketmq
docker
Doris集群搭建——2.0.1.1版本
解压安装包3.分发环境变量4.修改对应的配置文件(1)修改be的配置(2)修改fe的配置三、be的扩容与缩容(一)be扩容1.添加be节点3.另外两个节点启动be4.重新查看be节点状态(二)be缩容四、
broker
雷神乐乐
·
2024-01-14 06:31
#
Doris
运维
升级Doris集群——2.0.1.1到2.0.3版本
版本官方说不太稳定,所以我们可以对其进行升级1.关闭所有节点2.下载2.0.3版本的Doris安装包,将旧版本的bin和lib目录替换为对应新版本bin和lib目录,按照非master节点到master节点,be—
broker
—fe
雷神乐乐
·
2024-01-14 06:31
#
Doris
linux
服务器
后端
大数据
Logstash:迁移数据到 Elasticsearch
生产者将给定主题的数据发送到Kafka
Broker
;Kafka集群包含一个或多个
broker
,
Elastic 中国社区官方博客
·
2024-01-14 01:43
Elastic
Logstash
大数据
搜索引擎
Logstash
elasticsearch
数据库
2024.1.13 Kafka六大机制和Structured Streaming
Broker
端如何保证数据不丢失消费端如何保证数据不丢失Kafka中消费者如何对数据仅且只消费一次四.启动Kafkaeagle命令数据积压问题处理五.结构化流数据源FileSourceOPERATIONS
白白的wj
·
2024-01-13 18:37
kafka
分布式
大数据
python
hadoop
Kafka中的max-poll-records和listener.concurrency配置
1、max-poll-records是什么max-poll-records是Kafkaconsumer的一个配置参数,表示consumer一次从Kafka
broker
中拉取的最大消息数目,默认值为500
y_bccl27
·
2024-01-13 14:33
Kafka
kafka
MQTT协议
在MQTT中,有一个消息代理(
Broker
)中心,客户端通过连接到消息代理,实现发布消息
左手的月光
·
2024-01-13 14:57
物联网
mqtt
小心定势思维!
事后我回想这件事的前因后果,总结出我在这件事上犯的两个错误,一个是没有和同事和
broker
进行有效沟通,还有一个是我产生了定势思维。
小爱的杂货间
·
2024-01-13 14:12
【Python随笔】python轻量级消息队列库celery在fastapi的应用
celery就是一个典型的例子,它提供了以将python函数注册到消息队列的方式暴露服务的方法,并且支持RabbitMQ、Redis等多种
Broker
中
utmhikari
·
2024-01-13 07:36
Python随笔
python
celery
消息队列
web开发
start-fastapi
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他