RocketMQ集群架构

单节点canal的介绍和搭建（对接mysql和rocketMQ）

单节点canal-server+canal-admin的介绍和搭建（对接mysql和rocketMQ）一、简介1、Canal1、工作原理2、MySQL主从复制实现3、canal架构4、binarylog1
汀风·2024-09-15 05:49

【K8S】kubernetes集群架构与组件

文章目录【K8S】kubernetes集群架构与组件kubernetes组件**master组件**node组件整体流程POD终止过程【K8S】kubernetes集群架构与组件kubernetes组件
奇奇怪怪^·2024-09-15 05:43

【集群架构中的故障集合】_nfs connection reset by peer

3.Connectionrefused连接拒绝检查是否能ping通对应服务器[12:41root@backup~]#rsync-avz/etc176.16.1.31:/tmpssh:connecttohost176.16.1.31port22:Connectionrefusedrsync:connectionunexpectedlyclosed(0bytesreceivedsofar)[sende
2024云技术·2024-09-15 00:09

RocketMQ 架构简析，看这篇就够了！

生产者组（ProducerGroup）同一类Producer的集合，这类Producer发送同一类消息且发送逻辑一致。如果发送的是事务消息且原始生产者在发送之后崩溃，则Broker服务器会联系同一生产者组的其他生产者实例以提交或回溯消费。消费者组（ConsumerGroup）同一类Consumer的集合，这类Consumer通常消费同一类消息且消费逻辑一致。消费者组使得在消息消费方面，实现负载均衡
V搜编程进阶路·2024-09-14 19:33

RocketMQ消息重复消费--一起学习吧之架构

一、定义RocketMQ中的消息重复消费（DuplicateConsumption）指的是在某些情况下，消息可能会被多次消费，从而导致业务逻辑的重复执行。
吗喽一只·2024-09-13 12:16

大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL集群架构负载均衡方法选择全攻略（2-2）

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-13 08:25

分布式中间件-几个常用的消息中间件

.ApacheKafka3.RedisPub/Sub4.ActiveMQ5.AmazonSimpleNotificationService(SNS)和SimpleQueueService(SQS)6.RocketMQ
问道飞鱼·2024-09-12 19:24

RocketMQ复习

之前写的博客太杂，最近想把RocketMQ的知识点再系统的过一遍，带着自己的理解使用简短的话把一些问题总结一下，尤其是开发中和面试中的高频问题，基础知识点可以参考之前写的一些博客，这篇不再赘述。
slh别学了·2024-09-12 17:41

Spark运行时架构

目录一，Spark运行时架构二，YARN集群架构（一）YARN集群主要组件1、ResourceManager-资源管理器2、NodeManager-节点管理器3、Task-任务4、Container-容器
tooolik·2024-09-12 01:59

python使用rocketmq发送消息_阿里云消息队列RocketMQ使用示例

本文代码示例参见：https://gitee.com/imlichao/RocketMQ-exampleApacheRocketMQ文档：http://rocketmq.apache.org/docs/
weixin_39953481·2024-09-10 11:05

python调用rocketmq的api_Python：Rocketmq消息队列使用

rocketmq可以与kafka等一起使用，用于实时消息处理。
weixin_39914868·2024-09-10 11:35

Python API操作RocketMQ

背景：开发背景:公司相关报表需求需要将订单业务数据同步至RocketMQ中，由于需要保证开发的一致性(多个部门协同开发)，所以采用读取Hive离线数据的方式通过PythonAPI写入RocketMQ中，
京城小筑·2024-09-10 11:00

python操作rocket-mq

1、参考源码看源码，可以修改消息字节长度限制（rocketmq/client.py）2、推送消息fromrocketmq.clientimportProducer,Messageproducer=Producer
AQH~·2024-09-10 11:00

Docker部署RocketMQ5.2.0集群

部署模式RocketMQ作为消息中间件，其主要功能为消息的Publish/Subscribe。而Broker担任的消息转发和存储
egzosn·2024-09-10 10:58

k8s 调度流程和资源管理

如下图所示，画了一个很简单的Kubernetes集群架构，它包括了一个kube-ApiServer，一组webhooks的Controller，以及一个默认的调度器kube-Scheduler，还有两台物理机节点
Cloud孙文波·2024-09-10 08:41

RocketMq解决消息重复消费的问题

一、RocketMq解决业务端去重步骤：1、记录下每个消息的msgID2、新消息来的时候，查看该消息的msgID是否已记录，是则抛弃，否则消费二、RocketMq一般用redis进行记录，该msg是否被记录
壹佰大多·2024-09-09 19:31

RocketMQ 幂等性 (消息重复处理)

RocketMQ无法避免消息重复，所以如果业务对消费重复非常敏感，务必要在业务局面去重，有以下几种去重方式1.将消息的唯一键，可以是msgId，也可以是消息内容中的唯一标识字段，例如订单Id等，消费前判断是否在
JAVA代码搬运工·2024-09-09 18:28

大数据新视界--大数据大厂之MySQL数据库课程设计：MySQL集群架构负载均衡故障排除与解决方案

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-09 18:26

大数据新视界--大数据大厂之MySQL数据库课程设计：揭秘 MySQL 集群架构负载均衡核心算法：从理论到 Java 代码实战，让你的数据库性能飙升！

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-09 17:17

【Java】已解决：MQBrokerException: CODE: 1 DESC: create mapped file failed, server is busy or broke

文章目录一、分析问题背景场景示例：二、可能出错的原因三、错误代码示例错误分析：四、正确代码示例代码改进说明：五、注意事项在分布式消息中间件如ApacheRocketMQ的使用过程中，MQBrokerException
屿小夏·2024-09-09 05:59

ASP.NET Core 入门教学八 集成RocketMQ消息队列

在ASP.NETCore中集成RocketMQ消息队列，你需要遵循以下步骤：1.安装RocketMQ客户端库首先，你需要在你的ASP.NETCore项目中安装RocketMQ的.NET客户端库。
充值内卷·2024-09-08 20:55

阿里云RocketMQ_Exception]valid resource owner failed. maybe the resource wswy_tp_test_1 not created

这是我之前工作时遇到过的一个问题，在网上提供的解决方法都不可用，于是询问了阿里云的工单，终于解决了这个问题，现在把这个可行的解决方法拿出来和大家分享：1.instanceId是否有填，虽然给的demo说默认为空，其实不填就会报这个错，可能是由于mq版本升级的问题2.查看AccessKeyId对应的用户是否有操作mq的权限3.顺序消息类型不支持http请求（本人的项目就是由这个问题引起的，这个阿里云
fantasyYan2·2024-09-08 18:41

RocketMQ 如何保证消息不丢失？

RocketMQ的消息想要确保不丢失，需要生产者、消费者以及Broker的共同努力，缺一不可。
JinYD2018·2024-09-08 07:28

Kafka、RabbitMQ、RocketMQ 之间的区别是什么

Kafka、RabbitMQ、RocketMQ之间的区别是什么?
m0_67394230·2024-09-08 07:54

spring使用@Resource 注入map

spring使用@Resource注入map注入多个Service：/***单笔付款状态MQ消费**@authorzkg*@since2024-09-0616:11:19*/@Slf4j@Component@RocketMQMessageListener
Java知识技术分享·2024-09-08 04:36

Mysql 8.0 集群简介【官方文档5种方式】

Mysql官方介绍几种集群架构：Replication【主从复制】GroupReplication【组复制】InnoDBClusterInnoDBReplicaSetMySQLNDBCluster8.0
arroganceee·2024-09-08 00:04

腾讯，干掉 Redis 项目，正式开源、太牛逼啦

集群架构Tendis使用去中心化集群架构，每个数据节点都拥有全部的路由信息，用户可以访问集
六月·飞雪·2024-09-05 17:53

Kafka的事务实现

Kafka的事务Kafka的事务解决的问题和RocketMQ是不太一样的。RocketMQ中的事务，它解决的问题是，确保执行本地事务和发消息这两个操作，要么都成功，要么都失败。
Mirana_77·2024-09-05 15:43

SpringBoot整合Kafka

启动服务器kafka服务器的功能相当于RocketMQ中的broker，kafka运行还需要一个类似于命名服务器的服务。在kafka安装目录中自带一个类似于命名服务器的工具，叫做
ITBOY_ITBOX·2024-09-05 15:42

rocketmq 同步复制，异步复制，同步刷盘，异步刷盘详解

一、刷盘模式同步刷盘：在返回写成功状态时，消息已经被写入磁盘。具体流程是，消息写入内存的PAGECACHE后，立刻通知刷盘线程刷盘，然后等待刷盘完成，刷盘线程执行完成后唤醒等待的线程，返回消息写成功的状态。优点：机器宕机消息也会被保留，缺点：写入速度慢，吞吐量小。异步刷盘：在返回写成功状态时，消息只是被写入了内存的PAGECACHE，这样的好处是写操作的返回快，吞吐量大；当内存里的消息量积累到一定
husterlichf·2024-09-04 16:48

Redis：支撑高并发及高可用复杂的缓存架构

这里写目录标题一、企业级Redis集群架构二、（nginx+lua）+redis+ehcache的三级缓存架构三、数据库+缓存双写一致性解决方案四、大key：缓存维度拆分解决方案五、如何提高缓存的命中率一
玉成226·2024-09-04 12:51

聊聊rocketmq的PullConsumerImpl

序本文主要研究一下rocketmq的PullConsumerImplPullConsumerImplio/openmessaging/rocketmq/consumer/PullConsumerImpl.javapublicclassPullConsumerImplimplementsPullConsumer
go4it·2024-08-31 21:29

【ES专题】ElasticSearch集群架构剖析_es集群

+请求量提升/数据的不断增长(将数据分布到所有节点上)上面所说的正是集群架构的优势所在。
2401_84159688·2024-08-31 19:41

使用 Shell 脚本管理 RocketMQ 服务：启动、停止与状态检查

在分布式系统中，RocketMQ是一个流行的消息队列中间件。在开发和运维过程中，能够高效地启动、停止和检查RocketMQ相关服务的状态非常重要。
heromps·2024-08-31 00:57

SpringBoot优雅的封装不同研发环境下（环境隔离）RocketMq自动ack和手动ack

1.RocketMq的maven依赖版本：org.apache.rocketmqrocketmq-spring-boot-starter2.3.02.RocketMq的yml文件：#自定义属性system
小吴先生666·2024-08-30 15:59

helm学习第四篇-微服务组件的加入

微服务的组件也放进去—向外扩张要将Nacos服务添加到你已经包含了SpringBoot、Redis、MySQL和RocketMQ的HelmChart中，你可以按照以下步骤操作：注意！！
Wade_Crab·2024-08-30 15:58

helm学习第三篇--结合 springboot 单做

创建一个springboot项目放到里面去—开山立派要将你的SpringBoot项目代码与Redis、MySQL和RocketMQ组合到同一个HelmChart中，你可以按照以下步骤进行操作：1.准备SpringBoot
Wade_Crab·2024-08-30 15:27

12306项目学习笔记（框架篇Base）

在12306项目中由于我们引入了RocketMQ消息队列，这些库的对象通常不是Spring管理的，无法直接使用@Autowired注入，所以需要ApplicationContextHolde
Rainyocode·2024-08-30 09:20

【Rust光年纪】深度解读：Rust语言中各类消息队列客户端库详细对比

本文将介绍一些用于Rust语言的消息队列客户端库，包括AMQP、ApacheKafka、NSQ、ApachePulsar和RocketMQ，探讨它们的核心功能、使用场景、安装配置以及API概览。
friklogff·2024-08-29 03:27

编写组合helm, 组合之前的几个组件 -2

刚刚是独立安装，现在要组合他们到一个Chart里面—初入江湖要将Redis、MySQL和RocketMQ组合在一个HelmChart中，并且部署到同一个KubernetesPod或者同一个Helmrelease
Wade_Crab·2024-08-28 18:55

RocketMQ顺序消费

根据公司项目的一个使用场景，针对实时预警任务，会有同时消费某个设备正常或异常的事件，而这类事件具有时间维度上的先后性，需要符合先进先出（FIFO）原则进行发布和消费，而MQ消费为了吞吐量基本会使用多线程消费，RocketMQ
葵续浅笑·2024-08-27 20:35

LVS负载均衡群集

目录一、什么是集群二、集群使用在哪一个场景三、集群的分类四、负载均衡的集群架构五、负载均衡的工作模式六、部署安装LVS-NAT1.1步骤1.2ipvsadm工具选项1.3实际案例（这里面有很多细节，暂时没有解释说明
必叫你大败而归·2024-08-27 05:29

rocketmq： broker集群之间的brokerName命名是否可以一致。

今天回顾了下broker与nameserver之间建立连接之后30S一次的心跳测试源码和创建topic过程中broker主动推送topicConfig到Nameserver的源码（实际上心跳测试调用的方法和推送创建topic过程中broker主动推送topicConfig调用的方法是一样的，最终都是调用doRegisterBrokerAll()）。心里有两个疑惑产生：1.我们知道创建一个新的top
飞向天空的鱼·2024-08-25 10:18

深入讲解 Memcached

深入讲解Memcached目录Memcached的数据存储机制Memcached的一致性哈希Memcached的内存管理Memcached的集群架构Memcached与Redis对比高级使用技巧性能优化
杨哥带你写代码·2024-08-22 23:12

RocketMQ-Topic创建

手动创建我们打开控制台，有一个主题的table，点击新增这里创建Topic分为集群模式，和Broker模式，二者区别如下集群模式：该模式下创建的Topic是指当前集群下，所有的Broker中的Queue数量是相同的Broker模式：该模式下创建的Topic在集群中，每隔Broker中的Queue数量可以不同自动创建自动创建Topic时，默认采用的是Broker模式，会为每个Broker默认创建4个
程序员劝退师-TAO·2024-08-22 19:20

简要剖析RocketMQ：原理、架构与实践细节

RocketMQ是由阿里巴巴开源的一个高性能、低延迟、可扩展的分布式消息中间件。
皮皮哥1号·2024-08-22 07:38

Java ElasticSearch面试题

2.说说你们公司ES的集群架构，索引数据大小，分片有多少？3.ES的倒排索引是什么？4.ES是如何实现master选举的?
旺仔爱Java·2024-08-21 20:28

Kafka、ActiveMQ、RabbitMQ 及 RocketMQ区别比较

消息队列在电商系统、消息通讯、日志收集等应用中扮演着关键作用，以阿里为例，其研发的消息队列（RocketMQ）在历次天猫“双十一”活动中支撑了万亿级的数据洪峰，为大规模交易提供了有力保障。
木西爷·2024-03-28 11:12

MQ横向对比：RocketMQ、Kafka、RabbitMQ、ActiveMQ、ZeroMQ

前言本文将从多个角度全方位对比目前比较常用的几个MQ：RocketMQKafkaRabbitMQActiveMQZeroMQ下文单独说明。
namelessmyth·2024-03-25 19:08

skynet cluster集群笔记

在skynet中，集群是指将多个节点连接在一起，共同协作完成任务的一个系统，一个skynet集群架构中涉及的一些名词如下：1.节点：skynet中的节点是指运行着skynet实例的独立服务器。每个节点
半夏知半秋·2024-03-24 10:29
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他