E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
#RocketMQ
单节点canal的介绍和搭建(对接mysql和
rocketMQ
)
单节点canal-server+canal-admin的介绍和搭建(对接mysql和
rocketMQ
)一、简介1、Canal1、工作原理2、MySQL主从复制实现3、canal架构4、binarylog1
汀风
·
2024-09-15 05:49
中间件
阿里云
mysql
java
RocketMQ
架构简析,看这篇就够了!
生产者组(ProducerGroup)同一类Producer的集合,这类Producer发送同一类消息且发送逻辑一致。如果发送的是事务消息且原始生产者在发送之后崩溃,则Broker服务器会联系同一生产者组的其他生产者实例以提交或回溯消费。消费者组(ConsumerGroup)同一类Consumer的集合,这类Consumer通常消费同一类消息且消费逻辑一致。消费者组使得在消息消费方面,实现负载均衡
V搜编程进阶路
·
2024-09-14 19:33
Java程序员
java-rocketmq
rocketmq
架构
RocketMQ
消息重复消费--一起学习吧之架构
一、定义
RocketMQ
中的消息重复消费(DuplicateConsumption)指的是在某些情况下,消息可能会被多次消费,从而导致业务逻辑的重复执行。
吗喽一只
·
2024-09-13 12:16
rocketmq
学习
架构
分布式中间件-几个常用的消息中间件
.ApacheKafka3.RedisPub/Sub4.ActiveMQ5.AmazonSimpleNotificationService(SNS)和SimpleQueueService(SQS)6.
RocketMQ
问道飞鱼
·
2024-09-12 19:24
分布式技术
分布式
中间件
RocketMQ
复习
之前写的博客太杂,最近想把
RocketMQ
的知识点再系统的过一遍,带着自己的理解使用简短的话把一些问题总结一下,尤其是开发中和面试中的高频问题,基础知识点可以参考之前写的一些博客,这篇不再赘述。
slh别学了
·
2024-09-12 17:41
微服务
rocketmq
微服务
java
python使用
rocketmq
发送消息_阿里云消息队列
RocketMQ
使用示例
本文代码示例参见:https://gitee.com/imlichao/
RocketMQ
-exampleApache
RocketMQ
文档:http://
rocketmq
.apache.org/docs/
weixin_39953481
·
2024-09-10 11:05
python调用
rocketmq
的api_Python:
Rocketmq
消息队列使用
rocketmq
可以与kafka等一起使用,用于实时消息处理。
weixin_39914868
·
2024-09-10 11:35
Python API操作
RocketMQ
背景:开发背景:公司相关报表需求需要将订单业务数据同步至
RocketMQ
中,由于需要保证开发的一致性(多个部门协同开发),所以采用读取Hive离线数据的方式通过PythonAPI写入
RocketMQ
中,
京城小筑
·
2024-09-10 11:00
#
Python编程
python
python操作rocket-mq
1、参考源码看源码,可以修改消息字节长度限制(
rocketmq
/client.py)2、推送消息from
rocketmq
.clientimportProducer,Messageproducer=Producer
AQH~
·
2024-09-10 11:00
Python
Docker部署
RocketMQ
5.2.0集群
部署模式
RocketMQ
作为消息中间件,其主要功能为消息的Publish/Subscribe。而Broker担任的消息转发和存储
egzosn
·
2024-09-10 10:58
docker
容器
运维
RocketMq
解决消息重复消费的问题
一、
RocketMq
解决业务端去重步骤:1、记录下每个消息的msgID2、新消息来的时候,查看该消息的msgID是否已记录,是则抛弃,否则消费二、
RocketMq
一般用redis进行记录,该msg是否被记录
壹佰大多
·
2024-09-09 19:31
java-rocketmq
rocketmq
redis
RocketMQ
幂等性 (消息重复处理)
RocketMQ
无法避免消息重复,所以如果业务对消费重复非常敏感,务必要在业务局面去重,有以下几种去重方式1.将消息的唯一键,可以是msgId,也可以是消息内容中的唯一标识字段,例如订单Id等,消费前判断是否在
JAVA代码搬运工
·
2024-09-09 18:28
RocketMQ
java-rocketmq
rocketmq
【Java】已解决:MQBrokerException: CODE: 1 DESC: create mapped file failed, server is busy or broke
文章目录一、分析问题背景场景示例:二、可能出错的原因三、错误代码示例错误分析:四、正确代码示例代码改进说明:五、注意事项在分布式消息中间件如Apache
RocketMQ
的使用过程中,MQBrokerException
屿小夏
·
2024-09-09 05:59
java
开发语言
ASP.NET Core 入门教学八 集成
RocketMQ
消息队列
在ASP.NETCore中集成
RocketMQ
消息队列,你需要遵循以下步骤:1.安装
RocketMQ
客户端库首先,你需要在你的ASP.NETCore项目中安装
RocketMQ
的.NET客户端库。
充值内卷
·
2024-09-08 20:55
asp.net
rocketmq
后端
阿里云
RocketMQ
_Exception]valid resource owner failed. maybe the resource wswy_tp_test_1 not created
这是我之前工作时遇到过的一个问题,在网上提供的解决方法都不可用,于是询问了阿里云的工单,终于解决了这个问题,现在把这个可行的解决方法拿出来和大家分享:1.instanceId是否有填,虽然给的demo说默认为空,其实不填就会报这个错,可能是由于mq版本升级的问题2.查看AccessKeyId对应的用户是否有操作mq的权限3.顺序消息类型不支持http请求(本人的项目就是由这个问题引起的,这个阿里云
fantasyYan2
·
2024-09-08 18:41
阿里云
recket
mq
消息中间件
RocketMQ
如何保证消息不丢失?
RocketMQ
的消息想要确保不丢失,需要生产者、消费者以及Broker的共同努力,缺一不可。
JinYD2018
·
2024-09-08 07:28
#
RocketMQ
java-rocketmq
rocketmq
java
Kafka、RabbitMQ、
RocketMQ
之间的区别是什么
Kafka、RabbitMQ、
RocketMQ
之间的区别是什么?
m0_67394230
·
2024-09-08 07:54
面试
学习路线
阿里巴巴
android
前端
后端
spring使用@Resource 注入map
spring使用@Resource注入map注入多个Service:/***单笔付款状态MQ消费**@authorzkg*@since2024-09-0616:11:19*/@Slf4j@Component@
RocketMQ
MessageListener
Java知识技术分享
·
2024-09-08 04:36
spring技术
spring
java
后端
Kafka的事务实现
Kafka的事务Kafka的事务解决的问题和
RocketMQ
是不太一样的。
RocketMQ
中的事务,它解决的问题是,确保执行本地事务和发消息这两个操作,要么都成功,要么都失败。
Mirana_77
·
2024-09-05 15:43
消息队列
kafka
java
分布式
SpringBoot整合Kafka
启动服务器kafka服务器的功能相当于
RocketMQ
中的broker,kafka运行还需要一个类似于命名服务器的服务。在kafka安装目录中自带一个类似于命名服务器的工具,叫做
ITBOY_ITBOX
·
2024-09-05 15:42
SpringBoot
kafka
spring
boot
java
rocketmq
同步复制,异步复制,同步刷盘,异步刷盘详解
一、刷盘模式同步刷盘:在返回写成功状态时,消息已经被写入磁盘。具体流程是,消息写入内存的PAGECACHE后,立刻通知刷盘线程刷盘,然后等待刷盘完成,刷盘线程执行完成后唤醒等待的线程,返回消息写成功的状态。优点:机器宕机消息也会被保留,缺点:写入速度慢,吞吐量小。异步刷盘:在返回写成功状态时,消息只是被写入了内存的PAGECACHE,这样的好处是写操作的返回快,吞吐量大;当内存里的消息量积累到一定
husterlichf
·
2024-09-04 16:48
#
RocketMQ
java-rocketmq
rocketmq
java
聊聊
rocketmq
的PullConsumerImpl
序本文主要研究一下
rocketmq
的PullConsumerImplPullConsumerImplio/openmessaging/
rocketmq
/consumer/PullConsumerImpl.javapublicclassPullConsumerImplimplementsPullConsumer
go4it
·
2024-08-31 21:29
使用 Shell 脚本管理
RocketMQ
服务:启动、停止与状态检查
在分布式系统中,
RocketMQ
是一个流行的消息队列中间件。在开发和运维过程中,能够高效地启动、停止和检查
RocketMQ
相关服务的状态非常重要。
heromps
·
2024-08-31 00:57
rocketmq
SpringBoot优雅的封装不同研发环境下(环境隔离)
RocketMq
自动ack和手动ack
1.
RocketMq
的maven依赖版本:org.apache.
rocketmq
rocketmq
-spring-boot-starter2.3.02.
RocketMq
的yml文件:#自定义属性system
小吴先生666
·
2024-08-30 15:59
spring
boot
rocketmq
手动ACK和自动ACK
MQ环境隔离
helm学习第四篇-微服务组件的加入
微服务的组件也放进去—向外扩张要将Nacos服务添加到你已经包含了SpringBoot、Redis、MySQL和
RocketMQ
的HelmChart中,你可以按照以下步骤操作:注意!!
Wade_Crab
·
2024-08-30 15:58
java-rocketmq
微服务
spring
boot
云计算
kubernetes
helm学习第三篇--结合 springboot 单做
创建一个springboot项目放到里面去—开山立派要将你的SpringBoot项目代码与Redis、MySQL和
RocketMQ
组合到同一个HelmChart中,你可以按照以下步骤进行操作:1.准备SpringBoot
Wade_Crab
·
2024-08-30 15:27
java-rocketmq
spring
boot
redis
kubernetes
12306项目学习笔记(框架篇Base)
在12306项目中由于我们引入了
RocketMQ
消息队列,这些库的对象通常不是Spring管理的,无法直接使用@Autowired注入,所以需要ApplicationContextHolde
Rainyocode
·
2024-08-30 09:20
学习
【Rust光年纪】深度解读:Rust语言中各类消息队列客户端库详细对比
本文将介绍一些用于Rust语言的消息队列客户端库,包括AMQP、ApacheKafka、NSQ、ApachePulsar和
RocketMQ
,探讨它们的核心功能、使用场景、安装配置以及API概览。
friklogff
·
2024-08-29 03:27
Rust光年纪
rust
开发语言
后端
编写组合helm, 组合之前的几个组件 -2
刚刚是独立安装,现在要组合他们到一个Chart里面—初入江湖要将Redis、MySQL和
RocketMQ
组合在一个HelmChart中,并且部署到同一个KubernetesPod或者同一个Helmrelease
Wade_Crab
·
2024-08-28 18:55
docker
kubernetes
RocketMQ
顺序消费
根据公司项目的一个使用场景,针对实时预警任务,会有同时消费某个设备正常或异常的事件,而这类事件具有时间维度上的先后性,需要符合先进先出(FIFO)原则进行发布和消费,而MQ消费为了吞吐量基本会使用多线程消费,
RocketMQ
葵续浅笑
·
2024-08-27 20:35
rocketmq
java
rocketmq
: broker集群之间的brokerName命名是否可以一致。
今天回顾了下broker与nameserver之间建立连接之后30S一次的心跳测试源码和创建topic过程中broker主动推送topicConfig到Nameserver的源码(实际上心跳测试调用的方法和推送创建topic过程中broker主动推送topicConfig调用的方法是一样的,最终都是调用doRegisterBrokerAll())。心里有两个疑惑产生:1.我们知道创建一个新的top
飞向天空的鱼
·
2024-08-25 10:18
rocketmq学习
RocketMQ
-Topic创建
手动创建我们打开控制台,有一个主题的table,点击新增这里创建Topic分为集群模式,和Broker模式,二者区别如下集群模式:该模式下创建的Topic是指当前集群下,所有的Broker中的Queue数量是相同的Broker模式:该模式下创建的Topic在集群中,每隔Broker中的Queue数量可以不同自动创建自动创建Topic时,默认采用的是Broker模式,会为每个Broker默认创建4个
程序员劝退师-TAO
·
2024-08-22 19:20
#
RocketMQ
RocketMQ
简要剖析
RocketMQ
:原理、架构与实践细节
RocketMQ
是由阿里巴巴开源的一个高性能、低延迟、可扩展的分布式消息中间件。
皮皮哥1号
·
2024-08-22 07:38
rocketmq
架构
Kafka、ActiveMQ、RabbitMQ 及
RocketMQ
区别比较
消息队列在电商系统、消息通讯、日志收集等应用中扮演着关键作用,以阿里为例,其研发的消息队列(
RocketMQ
)在历次天猫“双十一”活动中支撑了万亿级的数据洪峰,为大规模交易提供了有力保障。
木西爷
·
2024-03-28 11:12
kafka
activemq
rabbitmq
阿里云
rocketmq
MQ横向对比:
RocketMQ
、Kafka、RabbitMQ、ActiveMQ、ZeroMQ
前言本文将从多个角度全方位对比目前比较常用的几个MQ:
RocketMQ
KafkaRabbitMQActiveMQZeroMQ下文单独说明。
namelessmyth
·
2024-03-25 19:08
Java框架
MQ
rocketmq
kafka
rabbitmq
activemq
Docker环境快速搭建
RocketMq
window上面安装:1.Namesrvdockerpull
rocketmq
inc/
rocketmq
创建C:/docker/
rocketmq
/data/namesrv/logs:/root/logsC:
上海第一深情Enoch
·
2024-03-17 00:02
#
精通RocketMQ
docker
rocketmq
容器
RocketMQ
的Reblance机制
RocketMQ
的Rebalance机制是一种动态的消费者负载均衡策略,它确保了消息在消费者之间的均衡分配。
来自宇宙的曹先生
·
2024-03-14 15:41
rocketmq
RabbitMQ、kafaka、
rocketmq
等消息队列MQ消息堆积如何解决
文章目录概述解决方案消息堆积如何处理如何解决消息队列的延时以及过期失效问题?消息队列满了以后该怎么处理?有几百万消息持续积压几小时,怎么办?概述1.产生背景:生产者投递消息的速率与我们消费者消费的速率完全不匹配。2.生产者投递消息的速率>消费者消费的速率导致我们消息会堆积在我们mq服务器端中,没有及时的被消费者消费所以就会产生消息堆积的问题3.注意的是:rabbitmq消费者我们的消息消费如果成功
思静语
·
2024-03-08 16:11
消息队列MQ
rabbitmq
rocketmq
分布式
kafka
rocketMQ
的使用
首先服务器配置好MQ其次添加maven依赖,增加mq配置,例如nameserver地址。创建生产者要素NameServer.//boker的ip+端口。生产者组的name名字。也可以有其他键值对。创建Message要素。topic//一个主题。主题会有消费者订阅。tag//标签同一个标题下也会有不同的分支。要传信息String的code[]。//可以通过json工具转成code【】。FxTaskC
夏与ta
·
2024-03-04 00:47
分布式
实习经历
java-rocketmq
rocketmq
windows
Rocketmq
java hello world 入门案例
从零手写实现mq
rocketmq
java入门案例整体结构|____src||____main|||____java||||____com|||||____ryo||||||____rocket|||||
老马啸西风
·
2024-03-01 16:59
java
Java面试八股文
我应该站在谁的肩膀上-OSIvsTCPIP模型2.Java面渣逆袭必看,面试题八股文Java基础、Java集合框架、Java并发编程、JVM、Spring、Redis、MyBatis、MySQL、操作系统、计算机网络、
RocketMQ
翁正存
·
2024-02-26 05:16
java
SpringBoot项目嵌入
RocketMQ
在SpringBoot中嵌入
RocketMQ
可以通过添加相应的依赖来完成。
李三不四
·
2024-02-23 10:28
java
linux
spring
boot
java-rocketmq
rocketmq
Docker无介绍快使用,docker拉取
rocketmq
(九)
问题背景上篇介绍了Docker拉取redis,本章介绍一下docker拉取
rocketmq
注意事项:因为我写的是一个系列,在之前的文章介绍过的一般不会重复介绍,可以根据以下链接查看之前的知识点默认已安装
时间是一种毒药
·
2024-02-20 21:14
Pulsar与
Rocketmq
、Kafka、Inlong-TubeMQ,谁才是消息中间件的王者?
|Pulsar作为下一代消息中间件的典型代表,在设计和实现上面都具备很好的前瞻性,综合考量了业界现存的一些比较常用的、优秀的消息中间的架构设计、适用场景、运营中的问题等,如目前用的比较多的Kafka、
Rocketmq
腾讯云开发者
·
2024-02-20 19:31
运维
大数据
分布式
数据库
kafka
2.13日学习打卡----初学
RocketMQ
(四)
2.13日学习打卡目录:2.13日学习打卡一.
RocketMQ
之JavaClassDefaultMQProducer类DefaultMQPushConsumer类Message类MessageExt类二
中北萌新程序员
·
2024-02-20 19:43
每日学习
学习
rocketmq
java
开发语言
Docker安装
RocketMQ
注意:没有docker环境的可以参考本人的centos安装docker1.查询有哪些可以用的
rocketMq
dockersearch
rocketmq
2.拉取镜像dockerpull
rocketmq
inc
·
2024-02-20 16:37
dockerrocketmq
将Spring Cloud项目改造为Spring-cloud-kubernetes项目
每天10:33更新文章,每天掉亿点点头发...源码精品专栏原创|Java2021超神之路,很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件
RocketMQ
公众号-芋道源码
·
2024-02-20 12:44
中间件
java
linux
数据库
spring
boot
活动回顾|
RocketMQ
运维经验圆桌交流「第二期」
2023年12月3日,AutoMQ举办了第二场线上交流会
RocketMQ
运维经验圆桌交流「第二期」,本次交流会汇聚了
RocketMQ
的作者以及来自腾讯云、网易、社区的技术专家。
·
2024-02-20 10:21
后端java
rocketMQ
-Dashboard安装与部署
1、下载最新版本
rocketMQ
-Dashboard下载地址:https://github.com/apache/
rocketmq
-dashboard2、下载后解压,并用idea打开3、修改配置①、修改端口及
修心光
·
2024-02-20 09:43
linux
服务器
java
RocketMQ
消息存储
消息存储由ConsumeQueue和CommitLog配合完成。CommitLog是消息的物理存储文件,ConsumeQueue是消息的逻辑队列,类似数据库索引文件,存储物理存储位置,每个MessageQueue对应一个ConsumeQueue文件,每台机器上的CommitLog被本机器所有ConsumeQueue共享。为保证CommitLog和ConsumeQueue的一致性,CommitLog
SlowGO
·
2024-02-20 06:57
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他