RocketMQ集群架构第13页

深入理解 Hadoop （二）HDFS架构演进

HDFS分布式集群架构设计实现核心设计思路：分而治之的思路，实现分散存储+冗余存储元数据管理核心问题：文件系统目录树文件和数据块的映射关系数据块和副本存储主机之间的映射关系NameNode内部两个非常重要的组件

我很ruo·2024-01-10 08:49

SmartLifecycle之RocketMq优雅停机

SmartLifecycle之RocketMq优雅停机前言线上环境发布重启时，经常会导致mq消费失败，不够优雅，之前对RocketMq了解也不太深入，刚好趁这个机会，解决mq的优雅停机问题，顺带着好好撸一撸

白菜404·2024-01-10 07:38

SpringCloud Alibaba

Nacos（服务注册与发现）二.Dubbo（服务调用）三.Ribbon（负载均衡）见SpringCloud四.Gateway（网关）五.Sentinel（服务容错）六.ScheduleX（分布式调度）七.RocketMQ

xnninger·2024-01-10 03:56

RocketMq(七)消息堆积处理方式

一、产生原因：消息堆积顾名思义就是消息队列中堆积了大量未被处理的消息，主要发生在高并发的场景下，生产者发送消息的速率远大于消费者组消息的速度。产生的原因有：（1）新上线的消费者的消费逻辑存在Bug，导致消息不能被正常消费。某些消息消费失败，或者消费超时，从而导致消息被大量堆积。（2）消费者实例宕机或者由于网络的原因不能连上Broker集群。消费者实例可能是单节点或者机房网络不好的情况。（3）生产者

w_t_y_y·2024-01-09 18:39

springboot集成Rocketmq关闭默认INFO日志

springboot集成Rocketmq关闭默认INFO日志项目中用springboot集成mq时总是被默认的日志信息困扰,不利于开发同学的日志查看以及对内存也有较大消耗,这时我们就可以使用以下几种方法将其关闭

开森鸭·2024-01-09 18:05

Springboot+RocketMQ通过事务消息优雅的实现订单支付功能

目录1.事务消息1.1RocketMQ事务消息的原理1.2RocketMQ订单支付功能设计1.事务消息RocketMQ的事务消息，是指发送消息事件和其他事件需要同时成功或同时失败。

山河亦问安·2024-01-09 16:31

我想从Spring Cloud Alibaba开始聊聊架构的本质？

架构随笔录·2024-01-09 15:11

常见技术选型

MQRocketMQ,RabbitMQ,Kafka,ActiveMQNoSQLRedis,Memcache分布式计算Blink,Storm,SparkDB关系型TiDB,MySQL,MongoDB,CassandraKVLevelDB

独处人·2024-01-09 14:46

MongoDB高级集群架构设计

两地三中心集群架构设计容灾级别RPO&RTORPO（RecoveryPointObjective）：即数据恢复点目标，主要指的是业务系统所能容忍的数据丢失量。

Firechou·2024-01-09 13:30

RocketMQ源码事务消息 TransactionalMessage 源码分析

而基于RocketMQ的分布式事务消息功能，在普通消息基础上，支持二阶段的提交能力。将二阶段提交和本地事务绑定，实现全局提交结果的一致性。

虚空小白·2024-01-09 12:39

RocketMQ源码发送顺序消息源码分析

前言rocketmq发送顺序消息和普通消息的主流程区别大部分一致的，区别在于：普通消息发送时，从所有broker的队列集合中轮询选择一个队列，而顺序队列可以提供用户自定义消息队列选择器，从NameServer

虚空小白·2024-01-09 12:38

RocketMQ源码发送延迟消息源码分析

前言rocketMQ支持的延迟消息，简单理解就是对于生产者发送的消息，支持设置固定时间的延迟级别，在到达指定的延迟时间时，才会投递到消费者队列，消费者才能消费到消息。

虚空小白·2024-01-09 11:33

02-007 Docker 启动 RocketMq

rocketmqserver创建目录mkdir-p/opt/rocketmq/server/logs&&chmod777/opt/rocketmq/server/logs映射本地目录logs权限一定要设置为

被搁浅的梦想·2024-01-09 10:11

MongoDB分片集群架构详解

分片简介分片（shard）是指在将数据进行水平切分之后，将其存储到多个不同的服务器节点上的一种扩展方式。分片在概念上非常类似于应用开发中的“水平分表”。不同的点在于，MongoDB本身就自带了分片管理的能力，对于开发者来说可以做到开箱即用。为什么要使用分片？MongoDB复制集实现了数据的多副本复制及高可用，但是一个复制集能承载的容量和负载是有限的。在你遇到下面的场景时，就需要考虑使用分片了：存储

Firechou·2024-01-09 10:40

分布式消息队列差异化总结

本文将对Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ从17个方面综合对比作为消息队列使用时的差异。一、资料文档Kafka：资料数量中等。

为爱放弃一切·2024-01-09 01:58

《高性能Linux服务器构建实战》笔记

系统安全、故障排查、自动化运维、集群架构1、账号安全，安装完后可以删除的账号：adm,lp,sync,shutdown,halt,news,uucp,operator,games,gopher禁用登录功能

SkTj·2024-01-08 22:06

RocketMQ5-01云原生和AI演变下的架构重构

2022年9月22日，迎来RocketMQ5的发版，距离2017发布的4.X时代，RocketMQ迎来5.X时代。

c_zyer·2024-01-08 13:12

【Day02】Spring Cloud组件的使用--Nacos配置中心、sentinel流量控制、服务网关Gateway、RocketMQ、服务调用链路（Sleuth、zipkin）...

今日内容一、配置中心1、遗留问题yml配置，每一次都需要重启项目需要不重启项目拿到更新的结果引出：配置中心选择：SpringCloudConfig组件/Alibaba的Nacos(注册中心、配置中心)使用：Nacos可以同时当配置中心和注册中心查看：默认8848端口，可以查看配置中心和注册中心内容2、实际创建创建配置可以填写yml名称和内容3、代码使用新的配置步骤：(1)导入依赖--之前的是dis

哥们要飞·2024-01-08 09:24

阿里巴巴微服务治理框架的终极PK！

架构随笔录·2024-01-08 05:46

分布式消息队列差异化总结，太全了！

本文将对Kafka、RabbitMQ、ZeroMQ、RocketMQ、ActiveMQ从17个方面综合对比作为消息队列使用时的差异。一、资料文档Kafka：资料数量中等。

Java_苏先生·2024-01-08 05:54

【云原生】初识Kubernetes的理论基础

内容预知1.k8s的由来及其技术运用1.1k8s的简介1.2传统后端部署与k8s的对比传统部署k8s的部署1.3k8s的主要功能2.k8s的集群架构与组件2.1k8s的集群机构的简单介绍2.2k8s的master

站在这别动，我去给你买橘子·2024-01-08 02:53

互联网软件架构演变——集群与分布式的区别

目录互联网软件架构演变单体架构优点缺点集群单体架构缺陷集群架构优势分布式集群与分布式的区别正常版白话版集群与分布式的联系联系1联系2集群，分布式举例集群举例：分布式举例：面向服务架构(SOA)微服务架构微服务架构优点微服务架构缺点完整的微服务架构图

Generalzy·2024-01-08 02:48

【RabbitMQ】1 消息中间件MQ概述

目录什么是消息中间件为什么使用消息中间件流量削峰应用解耦异步处理主流消息中间件及选型选取原则RabbitMQRocketMQKafka如何选择消息中间件应用场景电商秒杀案例拉勾B端C端数据同步案例支付宝购买电影票什么是消息中间件维基百科对消息中间件的解释

Ethan-running·2024-01-07 21:57

RocketMQ常见问题-RocketMQ消息堆积问题-TOPIC队列扩容

划个重点：RocketMQ是按照队列进行消息负载的，如果consumer中的一台机器由于机器硬件、系统、远程RPC或者JavaGC等原因导致该机器上的消息队列不能及时处理，整个消息队列的消息都会堆积。

北海宇微·2024-01-07 20:39

RabbitMQ快速入门（详细）

当下主流的消息中间件有RabbitMQ、Kafka、ActiveMQ、RocketMQ等2、作用1、消息中间件主要作用冗余(存储)扩展性可恢复性缓冲

寂冄·2024-01-07 19:44

RocketMQ5.0新组件Proxy

前言RocketMQ4.x版本之前，一套完整的MQ服务包含的组件有：Namesrv、Broker、Consumer、Producer。

程序员小潘·2024-01-07 18:51

2024年防止内卷和被潜规则，RocketMQ消息中间件实战派上下册上线啦｜架构随笔录

架构随笔录·2024-01-07 15:39

惊呆：RocketMQ顺序消息，是“4把锁”实现的（顺序消费）

尼恩说在前面在40岁老架构师尼恩的读者交流群(50+)中，最近有小伙伴拿到了一线互联网企业如阿里、滴滴、极兔、有赞、希音、百度、网易、美团的面试资格，遇到很多关于RocketMQ的、很重要的面试题：如何保证

40岁资深老架构师尼恩·2024-01-07 13:22

Spring boot 3 集成rocketmq-spring-boot-starter解决版本不一致问题

安装RocketMQ根据上篇文章使用Docker安装RocketMQ并启动之后，有个隐患详情见下文SpringBoot集成org.apache.rocketmqrocketmq-spring-boot-starter2.2.3rocketmq

X@AKS·2024-01-07 11:02

源码解析：Apache RocketMQ重置消费位点

引入resetoffset，即重置消费进度，一般在以下场景中使用：需要重新消费已经消费过的消息，重置到最早位置或根据时间进行重置。消息积压，不需要消费积压的消息，重置到最新位置，使其从最新位置开始消费。重置到最早、或者根据时间进行重置与消息补发的区别？●消息补发是将原先的消息由生产者重发一次，与区别的那边消息本质上不是同一条消息（除了消息体一样以外）。●重置操作是操作消费位点（offset），本质

serendipitabition·2024-01-07 08:25

【源码解析】Apache RocketMQ发送消息源码

sendmessage源码解析引入sendmessage方法作为我们经常使用的方法，平时我们很难去关注他底层到底做了什么。大部分人只知道通过sendmessage方法可以将消息发送到broker，然后供消费者进行消费。其实不然，消息从客户端发送到broker，需要中间需要经过很多步骤，比如：首先客户端需要向nameserver拿路由，拿到路由后才能将消息发送到对应的broker。消息到了broke

serendipitabition·2024-01-07 08:52

深度解析：Kafka、ActiveMQ、RabbitMQ、RocketMQ的区别与比较

目录引言1.Kafka1.1架构设计1.2特点与优势2.ActiveMQ2.1架构设计2.2特点与优势3.RabbitMQ3.1架构设计3.2特点与优势4.RocketMQ4.1架构设计4.2特点与优势

喔的喔的嘛呀·2024-01-07 05:16

RocketMQ详细介绍及核心问题解释（很全）

1.RocketMq是什么一个纯Java、分布式队列模型的消息中间件，具有高可用、高可靠、高实时、低延迟的特点。（记住这句就行了）2.RocketMq有什么功能1、业务解耦：这也是发布订阅的消息模型。

孤蓬&听雨·2024-01-07 05:09

RocketMQ源码分析----Producer队列选择与容错策略

队列选择在HA的文章里大概讲了一下Producer如何为高可用贡献出一份力量的，当时只是说了遍历列表选择队列，然后选择一个，没有深入分析，这篇文章深入分析一下其源码，首先从发送消息选择队列的代码开始：StringlastBrokerName=null==mq?null:mq.getBrokerName();MessageQueuetmpmq=this.selectOneMessageQueue(l

_六道木·2024-01-07 04:44

一本书全面搞懂分布式架构中如何使用RocketMQ的原理和实战案例

架构随笔录·2024-01-06 22:50

RocketMQ生产部署架构设计，建议收藏

正文梳理知识点，是快速提升技术的关键前面讲过，快速提升自己的技术硬实力其实是有方法的。大致就是梳理知识点+夯实基础+进阶深入学习+实战，下面我会一点点跟大家剖析，本文干货满满，大家仔细阅读。梳理知识后，夯实基础乃是刚需：深入进阶学习（28个主流Java知识点“一网打尽”）1、并发编程Java并发编程是整个Java开发体系中最难以理解，但也是最重要的知识点之一，一旦掌握你一定在市场上供不应求。Jav

imtokenmax合约众筹·2024-01-06 19:36

一code当先·2024-01-06 18:48

Redis Cluster高可用(HA)集群环境搭建详细步骤以及SpringBoot连接Redis集群(带密码)

1.为什么要有集群由于Redis主从复制架构每个数据库都要保存整个集群中的所有数据,容易形成木桶效应，所以Redis3.0之后的版本添加特性就是集群(Cluster)2.Redis集群架构说明架构细节:

心多大，路多远·2024-01-06 18:17

Kubernetes（K8S）的基础概念

3、k8s的特性二、k8s集群架构与组件1、Master组件2、配置存储中心——etcd3、WorkerNode组件三、k8s核心概念==●Pod====●Pod控制器(五大控制器)====●Label

Zcien·2024-01-06 16:11

RocketMQ基本概念

基本概念1消息模型（MessageModel）RocketMQ主要由Producer、Broker、Consumer三部分组成，其中Producer负责生产消息，Consumer负责消费消息，Broker

浅夏哥·2024-01-06 16:52

centos 7.9安装RocketMQ4.6.1版本

1.先下载二进制文件下载|RocketMQ2.下载后，进行解压unziprocketmq-all-4.6.1-bin-release.zip3.修改JVM配置进到/datadrive/rocketmq-all

猿小飞·2024-01-06 15:49

经典八股文之RocketMQ

核心概念NameServernameserver是整个rocketmq的大脑，是rocketmq的注册中心。broker在启动时向所有nameserver注册。

在下uptown·2024-01-06 11:14

服务器CentOs8 安装RocketMQ 4.9.4

前置条件安装好java环境下载、上传、解压下载二进制包传送门上传到服务器，这里上传到了/usr/local目录下解压：unziprocketmq-all-4.9.4-bin-release.zip移动到新的文件夹

豆沙睡不醒·2024-01-06 09:45

RocketMQ源码 Producer生产者源码架构分析

前言消息生产者MQproducer即消息的生产发送方，主要负责将生产方产生的消息投递到Broker节点。它主要的源码实现架构如下图，继承了MQAdmin管理组件接口，内部又依赖了DefaultMQProducerImpl内部实现类实现所有内部逻辑，DefaultMQProducerImpl实现了创建topic、获取消息队列偏移量、查看消息、发送消息、故障容错、事务消息、顺序消息等能力，最底层通过N

虚空小白·2024-01-06 08:10

RocketMQ源码发送消息源码分析

前言DefaultMQProducer是默认生产者组件，是生产者客户端中，绝大部分关于生产者和broker、nameSrv进行网络通信的功能入口。其中，包含发送各种形式（同步、异步、事务、顺序）的消息，针对发送消息部分的实现，主要是封装好消息协议后，从NameSrv获取当前Topic路由信息，轮询悬着一个队列，通过RemotingClient客户端，将请求发送给messageQueue所在的bro

虚空小白·2024-01-06 08:37

知识点总结——总体概览图

知识点总结数据结构和算法篇动画算法JAVAJava基础JVMJava多线程Java集合框架框架篇springmybatis消息队列kafkarocketmq数据存储篇redismysql系统设计，项目经验

谷禾水·2024-01-06 04:58

Redis集群架构解密：打造高性能分布式缓存引擎

目录1、前言2、Redis集群概述3、Redis集群架构的内部原理4、Redis集群的实现方式5、Redis集群的实现方式如何选择6、Redis集群的搭建7、结语1、前言在当今的互联网时代，随着用户数量的不断增长和业务流量的不断增加

凛鼕将至·2024-01-06 03:04

RabbitMQ 集群篇

RabbitMQ集群篇00、集群架构原理前面我们有介绍到RabbitMQ内部有各种基础构件，包括队列、交换器、绑定、虚拟主机等，他们组成了AMQP协议消息通信的基础，而这些构件以元数据的形式存在，它始终记录在

路面烧卖·2024-01-05 21:50

Springboot整合RocketMQ 基本消息处理

目录1.同步消息2.异步消息3.单向消息4.延迟消息5.批量消息6.顺序消息7.Tag过滤导入依赖org.apache.rocketmqrocketmq-spring-boot-starterYAML配置

山河亦问安·2024-01-05 20:36

spring-cloud-stream 整合 rocketmq/kafka

前言阿里推出spring-cloud-alibaba，实现了cloud-stream和rocketmq的整合。整合过程中出现的一些坑在这里分享一下。

六月寒战队·2024-01-05 18:22

推荐频道

RocketMQ集群架构