E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
rocketmq集群配置
深入了解
RocketMQ
消息中间件:架构、特性和应用场景
深入了解
RocketMQ
消息中间件:架构、特性和应用场景引言在当今的软件开发和系统架构中,消息中间件扮演着至关重要的角色。
一休哥助手
·
2024-02-09 11:42
分布式系统
rocketmq
架构
消息中间件之
RocketMQ
源码分析(八)
RocketMQ
中的消息过滤
RocketMQ
设计了消息过滤,来解决大量无意义流量的传输:即对于客户端不需要的消息,Broker就不会传输给客户端,以免浪费宽带,
RocketMQ
4.2.0支持Tag过滤、
coffee_babe
·
2024-02-09 02:36
消息中间件
rocketmq
java
RocketMQ
下载安装及基本使用
目录消息队列的作用消息队列的优势应用解耦异步提速削峰填谷
RocketMQ
介绍
RocketMQ
特点
RocketMQ
安装下载(4.9.5版本)
RocketMQ
启动可视化管理服务
RocketMQ
实现基本消息收发消息队列的作用队列是一种
山鸟与鱼!
·
2024-02-09 01:37
分布式中间件
rocketmq
后端
RocketMq
源码篇-消息偏移持久化
一、发起持久化消息偏移的持久化是消费者客户端的行为,在client启动的时候会设定定时任务,默认间隔5sMQClientInstance#startScheduledTask//持久化所有的消费者offsetthis.scheduledExecutorService.scheduleAtFixedRate(newRunnable(){@Overridepublicvoidrun(){try{MQC
sky_5395
·
2024-02-08 23:09
高可用 k8s 1.29 一键安装脚本, 丝滑至极
博客原文文章目录
集群配置
配置清单集群规划集群网络规划环境初始化主机配置配置高可用ApiServer安装nginx安装Keepalived安装脚本需要魔法的脚本不需要魔法的脚本配置自动补全加入其余节点验证集群
集群配置
配置清单
M·K·T
·
2024-02-08 15:44
kubernetes
#
shell
kubernetes
容器
云原生
运维
linux
shell
Nacos的集群部署配置
Nacos的集群部署配置一、准备工作二、搭建
集群配置
三、使用Springbootda搭建获取信息四、注意一、准备工作本机符合Nacos的环境及基本配置,可参考Nacos在Windows的安装及整合MySQL
Joe14103
·
2024-02-08 14:17
springcloud
spring
boot
nacos集群
java
RocketMQ
(二)
目录六:SpringBoot中整合Rocket的事务消息七:SpringCloudStream整合
RocketMQ
八:
RocketMQ
的核心概念1.消息模型2.消息生产者3.消息消费者4.主题(Topic
etcEriksen
·
2024-02-08 07:47
消息中间件
java-rocketmq
rocketmq
java
rocketmq
源码调试
github上下载源码
rocketmq
源码:https://github.com/apache/
rocketmq
.git更改namesrv和broker的配置路径namesrv启动类NamesrvStartup
齐云先生
·
2024-02-08 05:49
消息队列使用的四种场景介绍
使用较多的消息队列有ActiveMQ,RabbitMQ,ZeroMQ,Kafka,MetaMQ,
RocketMQ
。二、消息队列应用场景以下介绍消息队列在实际应用中常用的使用场景。
Bin哥厉害7
·
2024-02-08 03:19
java
spring
boot
消息队列
Spark Standalone
集群配置
前言平时工作中主要用YARN模式,最近进行TPC测试用到了Standalone模式,便记录总结一下Standalone集群相关的配置。集群管理类型Spark支持三种集群管理类型:Standalone-Spark附带的一个简单的集群管理器,可以轻松地设置集群。ApacheMesos-一个通用的集群管理器,也可以运行HadoopMapReduce和服务应用程序。(已弃用)HadoopYARN-Hado
董可伦
·
2024-02-07 23:01
Spark
spark
大数据
分布式
Hadoop |
集群配置
(一)使用Shell脚本解决完全分布式集群节点之间的文件传输问题 | scp命令 | rsync命令
文章目录参考资料一、前言二、rsync远程同步工具三、使用shell编写分发脚本四、总结参考资料视频链接Linuxscp命令一、前言在Hadoop完全分布式集群环境下,里面的各个节点都是通过SSH免密登陆连接的,比如现有三台集群节点,分别是hadoop101、hadoop102、hadoo103。hadoop101节点可以通过ssh命令连接到hadoop102,即:sshhadoop102那么,除
「已注销」
·
2024-02-07 21:20
#
大数据原理与应用
hadoop
分布式
linux
roketmq启动异常sendDefaultImpl call timeout; nested exception is org.apache.
rocketmq
.remoting.exception
前言:mq发送消息异常,最最简单的方式就是用telnet端口是否通畅。这个前面一篇rabbitMq有介绍。当然还有一种情况mq被墙了,或者物理隔绝了需要映射的情况也有。如果你设计时将mq部署在数据库服务器,不排除某些未知端口被限制了导致消息发不出去。如果检查各项配置后还是没有排查出问题直接部署一套到运用服务。抱拳:现在将一些常规的检查方法介绍一下,不当之处大家一笑而过。当然有高手兄能够指点一下,感
童龙辉
·
2024-02-07 17:20
rocketmq
CentOS7
集群配置
免密登录
准备工作提前开启三台虚拟机hadoop102、hadoop103,hadoop104,关于三台虚拟机的安装可以参考:https://mp.csdn.net/mp_blog/creation/editor/136010108配置免密登录一、分别修改三台机器的hosts,配置主机映射关系vim/etc/hosts文件中输入以下内容:IPhostname192.168.10.132hadoop10219
在下区区俗物
·
2024-02-07 12:00
Hadoop集群安装部署
linux
运维
大数据
CentOS7搭建Hadoop集群
准备工作1、准备三台虚拟机,参考:CentOS7集群环境搭建(3台)-CSDN博客2、配置虚拟机之间免密登录,参考:CentOS7
集群配置
免密登录-CSDN博客3、虚拟机分别安装jdk,参考:CentOS7
在下区区俗物
·
2024-02-07 12:57
Hadoop集群安装部署
hadoop
eclipse
java
Failed to start
RocketMQ
push consumer
参考地址:电脑死机后,项目启动报错——
rocketmq
相关
一只努力的程序猿
·
2024-02-07 08:13
问题处理
参考
intellij-idea
java
RocketMQ
消息发送的设计
前言在前面所介绍的
RocketMQ
的文章中,介绍了
RocketMQ
的消息发送方式有3种:同步、异步和单向。
NullzzZ
·
2024-02-07 07:53
深入浅出RocketMQ
java-rocketmq
rocketmq
java
后端
中间件
Nacos的
集群配置
、NacosRule负载均衡、权重设置、namespace
当我们的服务越来越多,服务实例越来越多(比如说userservice,有8081、8082、8083端口三个实例),我们在同一个机房部署所有的服务很不安全,应对突发状况时,就像鸡蛋放在一个篮子里;很不安全,很不友好,所有我们需要分开部署机房与服务器;一个服务可以分多个集群部署,一个服务器可以部署多个服务(但是一般不会这么做,一般一台服务器就只部署一个服务实例),一个集群可以有多个实例;那我们该如何
茂桑
·
2024-02-07 05:05
spring-cloud
spring
cloud
ribbon
RocketMQ
源码分析(四)消息的发送
消息发送的主要步骤为:验证消息,查找路由,消息发送(包含异常机制处理)我们以DefaultMQProducer#send为切入口:以下代码为验证消息publicSendResultsend(Messagemsg)throwsMQClientException,RemotingException,MQBrokerException,InterruptedException{//校验消息(主要是长度是
甘_
·
2024-02-07 04:01
深度解析kafka broker网络模型运行原理
原创不易,转载请注明出处文章目录前言1.kafka网络模型运行原理2.对比一下
RocketMQ
的网络模型总结前言本文将介绍下kafkabroker端的网络模型,会从宏观角度介绍下kafkabroker网络模型是啥样子的
$码出未来
·
2024-02-07 02:59
kafka源码解析
kafka网络模型
kafka网络模型运行原理
kafka
accept
RocketMQ
启动报错解决:Using the DefNew young collector with the CMS collector is deprecated and will likely
启动nameserver报错了,如下[root@localhost~]#mqnamesrvJavaHotSpot(TM)64-BitServerVMwarning:UsingtheDefNewyoungcollectorwiththeCMScollectorisdeprecatedandwilllikelyberemovedinafuturereleaseJavaHotSpot(TM)64-Bit
fyihdg
·
2024-02-06 19:00
rocketmq
java
java
开发语言
RocketMQ
-Producer
rocketmq
发送端的设计1、需要考虑什么?
丑人林宗己
·
2024-02-06 17:27
SpringBoot 集成 atomikos 实现分布式事务
例如
rocketMQ
.本文是介绍的一种基于XA事
jsl小时光
·
2024-02-06 15:08
spring
boot
分布式
后端
rocketMQ
集群部署
rocketMQ
集群部署
rocketMQ
安装包下载wgethttps://github.com/alibaba/
RocketMQ
/archive/v3.5.8.tar.gz//注:到github下载为未编译的包
戏 剧
·
2024-02-06 14:04
rocketMQ
rocketMQ
java
demo
kafka基本概念
文章目录前言为什么需要KafkaKafka的优势Kafka应用场景Kafka消费模式Kafka的基础架构前言我们小猿在学习到kafka这门技术的时候,相信大家已经学习过其它消息队列中间件,例如RabbitMq、
RocketMq
欲无缘
·
2024-02-06 07:58
#
Kafka
kafka
分布式
RocketMQ
和Kafka的区别,以及如何保证消息不丢失和重复消费
消息队列
RocketMQ
和Kafka的区别性能(单台)语言多语言支持客户端优缺点
RocketMQ
十万级javajava模型简单、接口易用,在阿里有大规模应用文档少,支持的语言少Kafka百万级服务端scala
Marciaguoguo
·
2024-02-06 04:38
中间件
rocketmq
kafka
分布式
RocketMQ
:消息存储
通常来说我们对分布式队列有高可靠性的要求,所以数据要进行持久化存储。消息生产者发送消息到MQ。MQ收到消息,将消息进行持久化,即在存储系统中新增一条记录。返回ACK确认消息给生产者。然后MQ推送消息给对应的消费者,等待消费者返回ACK。如果消息消费者在指定时间内成功返回ACK,那么MQ认为消息消费成功,在存储系统中删除消息,即执行第6步;如果MQ在指定时间内没有收到ACK,则认为消息消费失败,会尝
Anbang713
·
2024-02-06 04:24
2.
RocketMQ
集群搭建与消息发送样例
1.
RocketMQ
集群搭建1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker:消息的存储者。
lambdaCC
·
2024-02-06 00:58
Docker Compose 部署
RocketMQ
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、DockerCompose部署
RocketMQ
二、部署步骤1.
MarchAwake
·
2024-02-05 23:51
rocketmq
docker
docker
rocketmq
容器
消息中间件之
RocketMQ
源码分析(五)
消费进度保存机制消费者启动时会同时启动位点管理器,
RocketMQ
设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时,位点由客户端提交给Broker保存.广播消费时,位点保存在消费者本地磁盘上
coffee_babe
·
2024-02-05 20:57
消息中间件
java-rocketmq
rocketmq
java
RocketMQ
消息队列(一)—— 基本概念和消息类型
RocketMQ
是一个来自阿里巴巴的分布式消息中间件,于2012年开源,并在2017年正式成为Apache顶级项目。
断剑zou天涯
·
2024-02-05 18:05
微服务架构
#
RocketMQ
rocketmq
SpringCloud-消息驱动(Stream、生产者、消费者)
SpringCloud消息驱动StreamSpringCloudStream,的诞生是为了解决各种消息中间件之间的兼容性问题,学习过消息中间件的同学都知道现在市面上流行的消息中间件有ActiveMQ、RabbitMQ、
RocketMQ
JolyouLu
·
2024-02-05 12:30
SpringCloud
spring
cloud
rabbitmq
kafka
stream
分布式
第二章
RocketMQ
的安装与启动
2、主题(Topic)Topic表示一类信息的集合,每个主题包含若干条消息,每条消息只能属于一个主题,是
RocketMQ
进行消息订阅的基本单位。
小七学爪哇
·
2024-02-05 10:45
rocketmq
RocketMQ
设计
.Remoting通信类结构2.协议设计与编解码3.消息的通信方式和流程4.Reactor多线程设计三、消息过滤四、负载均衡1.Producer的负载均衡2.Consumer的负载均衡五、事务消息1.
RocketMQ
倜傥村的少年
·
2024-02-05 08:19
java-rocketmq
rocketmq
java
RocketMQ
之事务消息原理
文章目录前言传统XA事务方案:性能不足基于普通消息方案:一致性保障困难基于Apache
RocketMQ
分布式事务消息:支持最终一致性功能原理事务消息整体流程使用限制使用示例使用建议前言
RocketMQ
的事务消息是为了解决分布式事务的问题
倜傥村的少年
·
2024-02-05 08:19
rocketmq
事务消息
Spring Boot+
RocketMQ
实现多实例分布式环境下的事件驱动
2整合
RocketMQ
依赖版本引入
RocketMQ
依赖解决SpringBoot3+不兼容spring.factories参考配置文件3
RocketMQ
使用解决SpringBoot3+不支持spring.factories
漫走云雾
·
2024-02-05 06:07
java-rocketmq
spring
boot
rocketmq
一文讲透微服务下如何保证事务的一致性
文章目录从本地事务到分布式事务的演变强一致性解决方案2.1.二阶段提交协议2.2.三阶段提交协议最终一致性解决方案3.1.TCC模式3.2.补偿模式3.3.可靠事件模式开源项目的分布式事务实现解读4.1.
RocketMQ
4.2
chen_chen_chen_
·
2024-02-05 03:11
RocketMQ
源码分析(五)消息的存储
RocketMQ
存储的文件主要包括Comitlog文件、ConsumeQueue文件、IndexFile文件。CommitLog:消息存储文件,所有消息主题的消息都存储在CommitLog文件中。
甘_
·
2024-02-04 21:16
Kafka、ActiveMQ、RabbitMQ、
RocketMQ
都有什么优点和缺点
Kafka、ActiveMQ、RabbitMQ、
RocketMQ
都有什么区别,以及适合哪些场景?面试官心理分析其实面试官主要是想看看:你知不知道你们系统里为什么要用消息队列这个东西?
上善若泪
·
2024-02-04 18:12
RocketMQ
安装与基本使用
RocketMQ
在
RocketMQ
中有NameServer、Broker、生产者、消费者四种角色。
Artisan_w
·
2024-02-04 11:05
分布式与微服务架构
rocketmq
M1 Mac docker手动编译
rocketmq
M1docker手动编译
rocketmq
文章目录M1docker手动编译
rocketmq
构建`
rocketmq
-docker`镜像构建
rocketmq
-console创建配置文件构建
rocketmq
-docker
丁川
·
2024-02-04 11:46
微服务学习笔记和解决方案
docker
java-rocketmq
macos
Docker安装
RocketMQ
笔记
RocketMQ
架构上主要分为四部分:Producer:消息发布的角色,支持分布式集群方式部署。
KEEPMA
·
2024-02-04 04:24
skywalking
笔记
详解
RocketMQ
中的consumer
RocketMQ
的Consumer创建启动流程(1)Push和Pull这两种方式,本质都是Pull实现的,所以DefaultMQPullConsumerImpl的start方法启动(2)配置通知方式:广播
0X码上链
·
2024-02-03 23:20
VIP
优化缓存技术
分布式技术
java
rocketmq
java-rocketmq
第一章
RocketMQ
概述
1、MQ概述1、MQ简介MQ,MessageQueue,是一种提供消息队列服务的中间件,也称为消息中间件,是一套提供了消息生产、存储、消费全过程API的软件系统。消息即数据。一般消息的体量不会很大。2、MQ用途从网上可以查看到很多的关于MQ用途的概述,但总结起来其实就以下三点。限流削峰MQ可以将系统的超量请求暂存其中,以便系统后期可以慢慢进行处理,从而避免了请求的丢失或系统被压垮。异步解耦上游系统
小七学爪哇
·
2024-02-03 19:39
RocketMQ
java-rocketmq
rocketmq
java
【Springcloud篇】学习笔记七(十三章):Stream消息驱动
第十三章_Stream消息驱动1.消息驱动Stream介绍1.1Stream为什么被引入常见MQ(消息中间件):ActiveMQRabbitMQ
RocketMQ
Kafka有没有一种新的技术诞生,让我们不再关注具体
光久li
·
2024-02-03 19:33
Springcloud
spring
cloud
学习
笔记
jenkins+kuboard+k8s部署应用服务
一、背景因为公司做的B端口项目,很多的大型的B端客户服务升级迭代都会多少有些问题,为了降低迭代风险,所以考虑对于一些重要且版本比较老旧的客户,需要在公司内部搭建一套内部测试环境,有涉及
rocketmq
,
lipfff
·
2024-02-03 16:37
线上部署
运维
springcloud
jenkins
运维
java
Docker
集群配置
1、配置MySQLMySQL简单安装docker安装完MySQL并run出容器后,建议请先修改完字符集编码后再新建mysql库-表-插数据dockerrun-d-p2222:3306--privileged=true-eMYSQL_ROOT_PASSWORD=123456\-v/opt/mysql/log:/var/log/mysql\-v/opt/mysql/data:/var/lib/mysq
HuaLuLemon
·
2024-02-03 15:51
docker
docker
容器
RocketMQ
消息队列(二)—— Go语言操作
RocketMQ
上篇文章《
RocketMQ
消息队列(一)——基本概念和消息类型》记录了
RocketMQ
的一些基本的概念,本文主要写几个go语言操作
RocketMQ
的示例代码一、发送普通消息import("context
断剑zou天涯
·
2024-02-03 08:09
微服务架构
#
RocketMQ
rocketmq
golang
开发语言
常见消息队列:ActiveMQ、RabbitMQ、
RocketMQ
、Kafka的区别总结
目录前言1、常见消息队列1.ActiveMQ2.RabbitMQ3.
RocketMQ
4.Kafka2、区别1.消息传递模型2.消息持久化3.消息顺序性4.可靠性5.生态系统和社区支持6.表格对比前言消息队列可以实现应用程序之间的异步通信
cxzm_1024
·
2024-02-03 07:26
分布式框架
消息队列
RocketMQ
源码解析(五)-Broker架构及服务启动
之前几篇文章讲了Producer如何发送消息,Consumer如何收消息。后面会用更多的几篇来讲Broker,其实也就是消息队列的核心-分布式Queue的实现。Broker的功能主要包含如下几点:接收Producer发送的消息存储消息回复consumer的消息拉取请求master-slave之间的数据同步提供查询消息的接口首先看下Broker主要的类的关系Broker核心类Broker核心类数据管
空挡
·
2024-02-03 01:01
keepalived配置RGW高可用
下面是我测试
集群配置
情况:主机一:node-0/192.168.10.10/16MON主机二:node-1/192.168.10.11/16OSD2/RGW主机三:node-2/192.168.10.12
Joncc
·
2024-02-02 23:32
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他