Broker

Redis数据库入门

Theopensource,in-memorydatastoreusedbymillionsofdevelopersasadatabase,cache,streamingengine,andmessagebroker
无梦相白·2023-11-19 23:46

kafka：消息发送以及消费的过程

broker的主题里一有消息就立即推送给消费者吗？生产者的消息怎么保证成功发送到kafka，kafka怎么保证消息传给了消费者？
时间在手上，需要抓住·2023-11-19 11:21

kafka配置参数详解

kafka的配置分为broker、producter、consumer三个不同的配置一BROKER的全局配置最为核心的三个配置broker.id、log.dir、zookeeper.connect。
勇敢的心888·2023-11-19 08:22

django+celery +rabbitmq

采用典型的生产者-消费者模型包含三部分：1.队列broker:可使用redis，rabbitmq,或关系数据库作为broker2.处理任务的消费者workers:队列中有任务时就发出通知，worker收到通知就去处理
weixin_30872789·2023-11-19 06:09

使用Celery+RabbitMQ实现消息队列

CONTENTCeleryRabbitMQRefCeleryasynchronousmessagequeueingcelery=messagebroker+worker+taskresultstoreworkwithrabbitmq
Doris404·2023-11-19 06:01

celery + rabbitmq + django

home命令：django-admin.pystartprojectdemopythonmanage.pystartapphome2.项目创建成功后，在路径demo/demo/settings.py尾部添加BROKER_URL
ding1991as·2023-11-19 06:59

SpringBoot整合RocketMQ

支持Broker和Consumer端消息过滤，支持发布订阅模型和点对点，支持拉pull和推push两种消息模式，单一队列百万消息、亿级消息堆积，支持单master节点，多master节点，多master
LJessie·2023-11-19 02:25

docker-compose部署kafka

'bitnami/kafka:latest'ports:-'7050:7050'environment:-KAFKA_ENABLE_KRAFT=yes-KAFKA_CFG_PROCESS_ROLES=broker
淡漠世俗·2023-11-19 01:39

kafka node3 连接异常导致应用无法消费、生产数据

确认防火墙关闭也不行，最后先启动防火墙，再关闭，解决问题报错语句WARN[Controllerid=0,targetBrokerId=0]Connectiontonode3(/192.168.230.133
是阿威啊·2023-11-18 21:49

ADG 如何配置Fast Start Failover FSFO

GOAL***ReviewedforRelevance16-Jul-2015***OnceabrokerconfigurationhasbeenestablishedaddressingtheBusiness'requirementsforprotectingtheenvironmentfromdatalossneedtobeconsideredandpotentiallyaddressedthr
jnrjian·2023-11-18 20:00

《Redis实战篇》七、Redis消息队列

最简单的消息队列模型包括3个角色：消息队列：存储和管理消息，也被称为消息代理（MessageBroker）生产者：发送消息到消息队列消费者：从消息队列获取消息并处理消息使用队列的好处在于**解耦：**所谓解耦
爱编程的大李子·2023-11-18 19:22

java kafka producer_详解Kafka生产者Producer配置

基本配置metadata.broker.list：broker服务器集群列表，格式为host1:port1,host2:port2...producer.type：消息发送类型同步还是异步，默认为同步compression.codec
邵云卿·2023-11-17 09:37

Pulsar Producer（生产者）

目录1、生产者发送消息的2种方式2、生产者访问主题的4种模式3、消息压缩4、消息批量发送5、消息分块发送生产者（producer）是附加主题（topic）并把消息（messages）发送到Pulsarbroker
swadian2008·2023-11-17 09:35

【RocketMQ】原理分析：Producer消息发送模式、分发规则

1.消息发送模式1.1同步发送同步消息发送模式就是说消息发送出去后，producer会等到broker回应后才能继续发送下一个消息DefaultMQProducerproducer=newDefaultMQProducer
二狗家有矿·2023-11-17 09:03

Kafka Producer 发送大消息该如何配置以及如何提高吞吐量

kafka版本2.2.1今天有个同事要往kafka发送一个单条4M大小的数据，但是报错了，说消息过大，那么看一下有哪些参数是控制单条消息大小的首先看Broker级别的配置message.max.bytes
陈尘辰·2023-11-17 09:25

python使用Stream Load方式写入doris

0.doris支持的多种数据写入方式如：导入总览|ApacheDorisSparkLoad通过Spark导入外部数据BrokerLoad通过Broker导入外部存储数据StreamLoad流式导入数据(
菜鸟001号·2023-11-17 01:19

recketmq-启动命令

startmqnamesrv.cmdstartmqbroker.cmd-n127.0.0.1:9876autoCreateTopicEnable=true
silence1102·2023-11-16 19:37

基于canal client 自实现canal同步es(增量,全量)

代表一个canal运行实例，对应于一个jvminstance对应于一个数据队列（1个server对应1..n个instance)个人是这么理解的instance当做一个mq中的topic队列(kafka中的broker
lvjgang·2023-11-16 19:22

rabbitmq 集群搭建

RabbitMQ集群介绍RabbitMQ集群是一组RabbitMQ节点（broker）的集合，它们一起工作以提供高可用性和可伸缩性服务。
liuyunshengsir·2023-11-16 15:53

MQTT学习整理

文章目录MQTT介绍MQTT介绍MQTT协议介绍【重要&详细】MQTT问题记录MQTT嵌入式开发嵌入式MQTT开源库MQTTQOS2平台MQTTBroker(exmq)MQTT测试环境MQTTBroker
mayue_csdn·2023-11-16 14:36

MQTT协议客户端实现

原理：（1）MQTT协议身份和消息格式有三种身份：发布者（Publish）、代理（Broker）（服务器）、订阅者（Subsc
别叹气了我走就是·2023-11-16 14:03

Kafka中topic（主题）、broker（代理）、partition（分区）和replication（副本）它们的关系

在ApacheKafka中，有四个重要的概念：topic（主题）、broker（代理）、partition（分区）和replication（副本）。
所念皆星河73·2023-11-16 09:16

在Broker端进行消息过滤

在Broker端进行消息过滤，可以减少无效消息发送到Consumer，少占用网络带宽从而提高吞吐量。Broker端有三种方式进行消息过滤。
Hamilton_Huan·2023-11-16 09:38

各种故障对RocketMQ消息的影响

我们期望消息队列集群一直可靠稳定地运行，但有时候故障是难免的，本节我们列出可能的故障情况，看看如何处理：1）Broker正常关闭，启动；2）Broker异常Crash，然后启动；3）OSCrash，重启
Hamilton_Huan·2023-11-16 09:08

Deepstream使用Rabbitmq 和kafka发送消息(天坑)unable to connect to broker library

连接服务器失败，要么是本地参数没设对,要么服务器没开！使用Kafka发送消息好搞，按照/opt/nvidia/deepstream/deepstream-6.2/sources/libs/kafka_protocol_adaptor/README一步一步来就行了，前提是要搞kafka环境搭建开启，这个在README里面是没有提到的。kafka环境搭建:参考https://kafka.apache.
Zachary Zheng·2023-11-16 07:31

deepstream-测试发送AMQP

devInstallrabbitmq-clibrary--------------------------sudoapt-getinstalllibrabbitmq-devIfyouplantohaveAMQPbrokerinstalledonyourlocalmachine
山西茄子·2023-11-16 07:53

Kafka部署与SpringBoot集成

Kafka的每台服务器作为一个broker注册到ZooKeeper，多个broker借助ZooKeeper形成了Kafka集群。同时ZooKeeper会保存一些信息，例如消息消费的进度Offset等。
超频化石鱼·2023-11-16 06:54

RabbitMQ之发布确认

种发布确认速度对比总结一、发布确认原理生产者将信道设置成confirm模式，一旦信道进入confirm模式，所有在该信道上面发布的消息都将会被指派一个唯一的ID(从1开始)，一旦消息被投递到所有匹配的队列之后，broker
哥的时代·2023-11-15 16:53

RocketMQ基本概念

RocketMQ中的基本概念主题（Topic）标签（Tag）生产者（Producer）生产者组（Producer-Group）消费者（Consumer）消费者组（Consumer-Group）消息代理（Broker
三文鱼先生·2023-11-14 17:51

Windows安装RocketMQ

下载|RocketMQ二、将下载的文件进行解压三、配置环境变量四、启动nameServer1、在bin目录下执行cmd命令呼出命令框，执行startmqnamesrv.cmd请不要关闭这个对话框五、启动broker
Puddy_Q·2023-11-14 16:02

RocketMQ(一)：基本概念和环境搭建

、基本概念2、消息从发送到被消费的的流程3、生产和消费理解四、RocketMQ安装1、下载RocketMQ2、解压并配置环境变量3、修改nameServer的运行脚本-runserver.sh4、修改broker
冬天vs不冷·2023-11-14 02:31

Golang 整合RocketMQ

RocketMQ核心概念名称服务(NameServer):可以理解为注册中心，主要用来保存topic路由消息，管理Broker，在NameServer的集群中，NameServer彼此
饱腹百科·2023-11-14 00:49

RocketMQ 如何保证消息正常【投递】和【消费】

2、Broker处理消息阶段。3、Consumer消费消息阶段。一、Producer发送消息阶段1、安全机制保障1，发送方式。
信仰_273993243·2023-11-13 14:09

【管理工具】CMAK安装和使用（kafka-manager）

文章目录前言一、安装和启动1.1安装CMAK1.2启动cmak二、使用CMAK2.1添加kafka集群2.2topic概述2.3broker概述2.4其他操作前言一、安装和启动1.1安装CMAKJava
逆流°只是风景-bjhxcc·2023-11-13 12:45

Doris hdfs数据导入doris动态分区表

@羲凡——只为了更好的活着Dorishdfs数据导入doris动态分区表本文重点1.动态分区表创建2.读取路径作为分区参数3.预聚合增加count列——set(cnt=1)4.brokerload的hdfsHA
羲凡丞相·2023-11-13 12:11

Doris系列12-数据导入之Broker Load

文章目录一.BrokerLoad概述二.基本操作2.1创建导入2.1.1Label2.1.2数据描述类参数2.1.3导入作业参数2.1.4strictmode与sourcedata的导入关系2.2查看导入
只是甲·2023-11-13 12:39

doris broker方式从hdfs导入数据到doris

LOADLABELdb1.label1(DATAINFILE("hdfs://abc.com:8888/user/palo/test/ml/file1")INTOTABLEtbl1COLUMNSTERMINATEDBY","(tmp_c1,tmp_c2)SET(id=tmp_c2,name=tmp_c1),DATAINFILE("hdfs://abc.com:8888/user/palo/test
gegeyanxin·2023-11-13 12:33

MQTT学习

MQTT系列教程VS编译MQTT库C/C++mqtt库MQTT服务器brokers列表MQTT客户端列表
lifei_0001·2023-11-13 10:14

springboot整合artemisMQ

pom.xmlorg.springframework.bootspring-boot-starter-weborg.springframework.bootspring-boot-starter-artemis2.application.properties#配置artemis的内容spring.artemis.broker-url
qq_42800468·2023-11-13 10:33

rocketMq消息堆积处理方式

（2）消费者实例宕机或因网络问题暂时无法同Broker建立连接。（3）生产者短时间内推送大量消息至Broker，消费者消费能力不足。
小甄笔记·2023-11-13 08:24

Kafka消费组重平衡的流程

重平衡需要借助KafkaBroker端的Coordinator组件，在Coordinator的帮助下完成整个消费者组的分区重分配。在给我们带来的便利和一些问题。这篇来分析一下重平衡的整个流程。
simanstar·2023-11-13 05:10

25 | 消费者组重平衡全流程解析

文章目录Kafka核心技术与实战深入Kafka内核25|消费者组重平衡全流程解析触发与通知消费者组状态机消费者端重平衡流程Broker端重平衡场景剖析Kafka核心技术与实战深入Kafka内核25|消费者组重平衡全流程解析消费者组的重平衡流程的作用是让组内所有的消费者实例就消费哪些主题分区达成一致
久违の欢喜·2023-11-13 05:38

消息队列原理

【消息队列的定义】消息队列是在消息的传输过程中保存消息的容器；用于接收消息，并以文件的形式存储；一个消息队列可以被一个或者多个消费者消费；三个元素：Producer：消息生产者，负责生产和发送消息到Broker
hfxcx·2023-11-12 16:30

Kafka基于Zookeeper搭建高可用集群实战

在Kafka在0.8以前的版本中，是没有Replication的，一旦某一个Broker宕机，则其上所有的Partition数据都不可被消费，这与Kafka数据持久性及DeliveryGuarantee
至尊宝l·2023-11-12 10:01

Doris0.15-Broker Load

Broker以插件的形式，独立于Doris部署。如果需要从第三方存储系统导入数据，需要部署相应的Broker，默认提供了读取HDFS、百度云BOS及AmazonS3的fs_broker。
如是我闻.春风不渡·2023-11-12 09:58

Doris Broker Load入门实战

BrokerLoad原理Brokerload是一个异步的导入方式，支持的数据源取决于Broker进程支持的数据源。
wangleigiser·2023-11-12 09:28

Apache Doris 入门教程10：数据导入之Broker Load

BrokerLoadBrokerload是一个异步的导入方式，支持的数据源取决于Broker进程支持的数据源。
sunjian286·2023-11-12 09:57

mosquitto配置用户名密码及tls加密双向认证访问

需求背景需要在linux环境中安装配置mqttbroker，并配置用户名、密码访问及tls加密传输认证；准备资料1、centos6.564bit2、mosquitto1.4.4版本安装mqttbroker
itgather·2023-11-11 15:22

kafka的Consumer 消费者(六)

Kafka的消费方式  消息队列主要有两个消费方式：pull(拉)模式和push(推)模式  pull(拉)模式consumer采用从broker中主动拉取数据，push(推)模式broker决定消息发送速率
華小灼·2023-11-11 13:16

【Kafka源码分析】三、消费者Consumer

一、推拉模式和基本设计消息队列通常有两种消息获取模式：pull（拉）模式：consumer采用从broker中主动拉取数据，不足之处是如果没有数据，消费者可能会陷入循环中，一直返回空数据。
wanger61·2023-11-11 13:15
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他