Broker

Kafka 高效读写数据

2）零复制技术5Zookeeper在Kafka中的作用Kafka集群中有一个broker会被选举为Controller，负责管理集群b
大数据开发工程师-宋权·2023-10-12 01:55

Kafka在什么情况下会丢数据

一、producer配置acks=0在acks=0模式下，消息传输到Broker端没收到Broker的反馈即发送下一条，这种纯异步的发送方式，难免会丢数据。
Keal、·2023-10-12 00:02

使用mosquitto实现MQTT通信

1MQTT编程的前期准备MQTT通信时，使用发布/订阅消息模式，其通信模型如下：在编写客户端程序时，需要准备好服务器(broker)的ip地址和端口号。
三毛小白·2023-10-11 16:07

docker搭建rocketmq集群

mkdir-p/mydata/rocketmq/data/namesrv/logs/mydata/rocketmq/data/namesrv/storemkdir-p/mydata/rocketmq/data/broker
昱宸星光·2023-10-11 15:52

数据采集平台（二）

组内每个消费者并行消费为提高可用性，为每个partition增加若干副本，类似NameNodeHA5.2安装步骤解压kafka文件，改为缩略名进入kafka/config文件，修改配置文件：myid和brokerID
十七✧ᐦ̤·2023-10-11 14:22

阿里双十一交易核心链路产品--RocketMQ 底层原理及性能调优实战

RocketMQ产品发展RocketMQ版本发展阿里内部项目的使用展望未来RocketMQ的物理架构核心概念NameServer生产者(Producer)消费者(Consumer)消息(Message)主机(Broker
Java大厂面试君·2023-10-11 14:10

RocketMQ整体理解

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
谭俊杰 Jerry·2023-10-11 14:10

RocketMQ01-整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
roykingw·2023-10-11 14:39

VIP01-RocketMQ整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
liuhehe321·2023-10-11 14:04

一：RocketMQ整体理解与快速实战

、MQ的优缺点3、几大MQ产品特点比较二、RocketMQ快速实战1、下载RocketMQ4.7.1版本2、快速安装RocketMQ3、快速运行RocketMQ3.1启动NameServer3.2启动Broker3.3
PoetryAndTheDistance·2023-10-11 14:01

SimNow仿真交易【官方环境介绍】 期货仿真环境地址 期货模拟交易

环境介绍simnow官网（注册模拟账号）：https://www.simnow.com.cn/BrokerID统一为：9999第一套（支持上期所期权、能源中心期权、中金所期权）：第一组：TradeFront
Leo.LIAO·2023-10-11 09:27

RabbitMQ入门

无需等待订阅者处理完成，响应更快速故障隔离：服务没有直接调用，不存在级联失败问题调用间没有阻塞，不会造成无效的资源占用耦合度极低，每个服务都可以灵活插拔，可替换流量削峰：不管发布事件的流量波动多大，都由Broker
lmd666·2023-10-11 09:06

中间件-Kafka学习笔记

ProducerAPIConsumerAPIKafka监控Kafka调优Kafka机器数量计算Kfka压力测试Kafka分区数计算Kafka概述kafka基础架构Producer：消息生产者，向kafkabroker
笑一笑、·2023-10-11 07:05

Kafka系列之—Kafka Broker安装（三）

一下载ApacheKafkaApacheKafka:ADistributedStreamingPlatform.https://kafka.apache.org/downloads.html二安装将Kafka安装在/usr/local/kafka目录下，使用之前配置好的Zookeeper,并把消息日志保存在/tmp/kafka-logs目录下tar-zxfkafka_2.12-3.1.1.tgzm
葛旭朋·2023-10-11 07:58

启动kafka报错ERROR Fatal error during KafkaServer startup. Prepare to shutdown ，找到原因就要可以解决

ERRORFatalerrorduringKafkaServerstartup.Preparetoshutdown(kafka.server.KafkaServer)kafka.common.InconsistentBrokerIdException
光数葱丁·2023-10-11 04:54

Kafka集群架构设计原理详解

这一部分主要是从可见的存储数据的角度来理解Kafka的Broker运行机制。这对于上一章节建立的简单模型，是一个很好的细节补充。Kaf
will.tsang·2023-10-11 00:33

Kafka日志索引详解以及生产常见问题分析与总结

但是，在进行具体业务时，还是需要各个Broker进行分工，各自处理好自己的工作。每个Broker如何高效的处理以及保存消息，也是Kafka高性能背后非常重要的设计。
will.tsang·2023-10-11 00:01

RabbitMQ高级特性可靠性传递，ACK机制，限流，TTL，死信，延迟，日志与监控，消息追踪的学习

RabbitMQ高级特性的学习一丶消息的可靠性传递（生产端）rabbitmq整个消息投递的路径为：producer—>rabbitmqbroker—>exchange—>queue—>consumer在使用
codingTop·2023-10-10 16:41

术语与缩写解释

抽象数据类型/用户定义类型2、Adapter：适配器3、COM：ComponentObjectModel，组件对象模型4、Container：容器5、CORBA：CommonObjectRequestBrokerarchitectiure
aaa-bbb-ccc·2023-10-10 14:22

第13课：MQTT 5.0 协议新特性

2018年，MQTT5.0已正式发布，虽然目前支持MQTT5.0的Broker和Client库还比较有限，但是作为MQTT未来的发展方向，我认为了解5.0的新特性还是很有必要的，也许看
sufish·2023-10-10 06:24

【MQTT学习】lesson14. MQTT 5.0 协议新特性

2018年，MQTT5.0已正式发布，虽然目前支持MQTT5.0的Broker和Client库还比较有限，但是作为MQTT未来的发展方向，我认为了解5.0的新特性还是很有必要的，也许看
沉默的小宇宙·2023-10-10 06:52

MQTT系列 | MQTT 5.0协议新特性

2018年，MQTT5.0已正式发布，但是目前支持MQTT5.0的Broker和Client库还比较有限。作为MQTT3.1.1的后续版本，为什么版本号直接变成了5.0？
多选参数-程序锅·2023-10-10 05:20

kafka架构详解及常见问题

kafka是什么kafka是一种高吞吐量的分布式消息系统kafka有什么作用作为常规的消息队列使用作为网站的活性跟踪工具作为日志收集中心kafka的架构名词解释broker：消息系统中的一个处理节点，一个
peerless_fu·2023-10-10 05:53

kafka的常见配置及详解

kafka的配置目录下server.propertie常用的几个配置broker.id在单机时无需修改，但在集群下部署时往往需要修改。它是个每一个broker在集群中的唯一表示，要求是正数。
搬砖明·2023-10-10 05:53

kafka日志文件详解及生产常见问题总结

log日志梳理日志文件是kafka根目录下的config/server.properties文件，配置log.dirs=/usr/local/kafka/kafka-logs，kafka一部分数据包含当前Broker
高如风·2023-10-10 05:20

rocketmq的安装及使用

Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递，投递的过程支持快速失败并且低延迟。Consumer：消息消费的角色，支持分布式集群方式部署。
叫我11·2023-10-10 02:37

RocketMQ安装

减压后就行涉及端口rocke有9876非vip通道端口:10911vip通道端口:1090910909是VIP通道对应的端口，在JAVA中的消费者对象或者是生产者对象中关闭VIP通道即可无需开放10909端口如果是broker
闲猫·2023-10-10 02:06

RocketMQ 安装使用

下载到官网下载对应版本的RocketMQ安装unzip解压改参数改内存相关的参数vimbin/runserver.shvimbin/runbroker.sh.修改Broker配置文件broker.confvimconf
_那年夏天·2023-10-10 02:06

RocketMQ的安装和使用

、安装1.RocketMQ安装2.控制台(页面管理)安装二、部署1.配置文件修改2.启动3.服务器上测试三、springboot使用1.依赖2.生产者3.消费者四、消息可靠性1.消息状态2.生产者3.broker4
silver^bullet·2023-10-10 02:04

rocketmq安装及使用

查看是否启动成功6.验证7.创建停止脚本8.查看日志9.如果需要修改内存5.多master模式1.优缺点1.优点2.缺点2.安装1.上传安装包2.解压3.创建namesrv启动脚本4.启动namesrv5.修改broker
q495673918·2023-10-10 02:04

RocketMQ安装使用过程中出现的问题

（无需修改文件）mqnamesrv.cmd-nlocalhost:9876mqbroker.cmd-nlocalhost:9876autoCreateTopicEnable=true如果报错可以选择较低版本
2万加速度·2023-10-10 02:33

RocketMQ安装和使用

rocketmq-all-4.9.4-bin-release.zip安装:unziprocketmq-all-4.9.4-bin-release.zipcdrocketmq-all-4.9.4-bin-release/修改broker
Sunny_yiyi·2023-10-10 02:32

基础实验篇 | uORB消息读写与自定义实验(一)

基础实验篇|uORB消息读写与自定义实验(一)ectRequestBroker，微对象请求代理器）是PX4/Pixhawk系统中非常重要且关键的一个模块，它肩负了整个系统的数据传输任务，所有的传感器数据
飞思实验室·2023-10-10 02:59

RabbitMQ入门实例

1.RabbitMQ工作原理1.1术语Broker：消息队列服务进程，此进程包括Exchange和QueueExchange：消息队列交换机，按一定的规则将消息路由转发到某个队列，对消息进行过滤Queue
猿猴乐园·2023-10-09 21:37

KafKa存储机制

目录存储机制kafka存储选型Kafka存储方案剖析kafka存储架构设计kafka日志系统架构设计日志目录布局磁盘数据存储可靠性Producer的可靠性保证kafka配置为CP系统kafka配置为AP系统Broker
Mr.简锋·2023-10-09 16:46

kafka请求队列模块

当我们说到Kafka服务器端，也就是Broker的时候，往往会说它承担着消息持久化的功能，但本质上，它其实就是一个不断接收外部请求、处理请求，然后发送处理结果的Java进程(因为scala代码被编译之后生成
红岸水滴·2023-10-09 16:45

kafka的请求处理机制

控制请求与数据类请求参考资料前言：无论是Kafka客户端还是Broker端，它们之间的交互都是通过“请求/响应”的方式完成的。
遇见更好的自己、·2023-10-09 16:14

RabbitMQ 介绍与 SpringBootAMQP使用

一、MQ概述异步通信的优点：耦合度低吞吐量提升故障隔离流量削峰异步通信的缺点：依赖于Broker的可靠性、安全性、吞吐能力架构复杂，业务么有明显的流程线，不方便追踪管理什么是的MQMQ（MessageQueue
紫霖ty·2023-10-09 15:08

Doris进阶——数据导出

Export导出Doris提供了一种数据导出功能，可以将数据（可指定分区）的数据以文本的格式进行导出，可以通过Broker进程将数据导出到HDFS或者其他远端存储系统中。
小眼睛的Ayuan·2023-10-09 10:46

Apache Doris 0.14.0部署HDFS Broker服务

目录1.编译2.HDFSBroker的部署1.编译官方提供Docker环境编译、Centos\Ubuntu环境编译、ARM64平台编译，我们这里采样Docker环境编译下载Docker镜像[root@bigdata001
Bulut0907·2023-10-09 10:46

Doris系列18-数据导出

该功能可以将用户指定的表或分区的数据，以文本的格式，通过Broker进程导出到远端存储上，如HDFS/BOS等。名词解释:FE：Frontend，Doris的前端节点。负责元数据管理和请求接入。
只是甲·2023-10-09 10:43

Doris-04-数据导入和导出&数据备份和恢复

文章目录数据导入和导出数据导入BrokerLoadStreamLoadRoutineLoadBinlogLoadInsertIntoS3Load数据导出Export导出查询结果导出mysqldump导出数据备份及恢复简要原理说明备份恢复删除远端仓库数据导入和导出数据导入导入
迷雾总会解·2023-10-09 10:42

Apache Doris 入门教程18：数据导出

该功能可以将用户指定的表或分区的数据，以文本的格式，通过Broker进程导出到远端存储上，如HDFS/对象存储（支持S3协议）等。本文档主要介绍Export的基本原理、使用方式、最佳实践以及注意事项。
sunjian286·2023-10-09 10:42

Apache Doris Broker快速体验之案例（3）

ApacheDorisBroker快速体验之案例（3）环境信息硬件信息软件信息Broker介绍Broker导入案例测试表创建数据初始化导入任务创建结果验证Broker导出案例测试表创建数据初始化导出任务创建结果验证
乙真仙人·2023-10-09 10:08

【mq】从零开始实现 mq-11-消费者消息回执添加分组信息 pull message ack groupName

【mq】从零开始实现mq-03-引入broker中间人【mq】从零开始实现mq-04-启动检测与实现优化【mq】从零开始实现mq-05-实现优雅停机【mq】从零开始实现mq-06-消费者心跳检测heartbeat
老马啸西风2020·2023-10-09 02:21

RocketMQ源码解析——Broker部分之Broker启动过程BrokerStartup(1)

@[toc]从启动脚本到启动类 我们知道RocketMQ的Broker端的启动方式为，进入到RocketMQ的bin目录下，运行对应的mqbroker脚本。 
szhlcy·2023-10-09 01:34

Datasophon升级doris版本为2.0.1

背景使用datasophon管理，原来是doris-1.2.4版本由于查询数据量不一致问题升级到doris-2.0.1版本集群规划两台fe一个follower,一个observer,三台BE节点，两个台broker
皮皮阿~·2023-10-08 22:56

building and deploying a single-Master RocketMQ cluster

buildinganddeployingasingle-MasterRocketMQcluster1、下载RocketMQ安装包(这里是通过源码安装)2、安装3、启动nameserver4、启动borkerStartthebrokerserviceVerifythatthebrokerserviceisstartedsuccessfully
佐杰·2023-10-08 20:43

ActiveMQ、RabbitMQ、Kafka、RocketMQ的区别

activemq支持主从复制，集群，但集群功能很弱，只支持failover，即连一个broker失败了，可以转到其他broker来，但这样有一个缺陷，当有三个broker
Java打工人·2023-10-08 19:48

Kafka、RabbitMQ、RocketMQ 消息中间件的对比

消息队列是在消息的传输过程中保存消息的容器，包含以下3元素：Producer：消息生产者，负责产生和发送消息到Broker；Broker：消息处理中心，负责消息存储、确认、重试等，一般其中会包含多个Queue
sd_zhao18·2023-10-08 19:11
上一页 22 23 24 25 26 27 28 29 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他