E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
rocketmq集群搭建
Hadoop分布式计算实验踩坑实录及小结
目录Hadoop分布式计算实验踩坑实录及小结踩坑实录Hadoop学习Hadoop简介HDFSSomeconceptsMapReduce主要配置文件
集群搭建
来源与引用Hadoop分布式计算实验踩坑实录及小结踩坑实录单机
小童同学_
·
2024-02-07 10:08
HIT
hadoop
分布式
ubuntu
java
Elasticsearch三节点
集群搭建
Elasticsearch三节点
集群搭建
1、Elasticsearch简介Elasticsearch是一款近实时的分布式搜索、分析引擎,可以动态横向扩展以应对数据的增长。
TSLONG_TSL
·
2024-02-07 09:18
Elasticsearch
elasticsearch
Failed to start
RocketMQ
push consumer
参考地址:电脑死机后,项目启动报错——
rocketmq
相关
一只努力的程序猿
·
2024-02-07 08:13
问题处理
参考
intellij-idea
java
RocketMQ
消息发送的设计
前言在前面所介绍的
RocketMQ
的文章中,介绍了
RocketMQ
的消息发送方式有3种:同步、异步和单向。
NullzzZ
·
2024-02-07 07:53
深入浅出RocketMQ
java-rocketmq
rocketmq
java
后端
中间件
RocketMQ
源码分析(四)消息的发送
消息发送的主要步骤为:验证消息,查找路由,消息发送(包含异常机制处理)我们以DefaultMQProducer#send为切入口:以下代码为验证消息publicSendResultsend(Messagemsg)throwsMQClientException,RemotingException,MQBrokerException,InterruptedException{//校验消息(主要是长度是
甘_
·
2024-02-07 04:01
3.0 Zookeeper linux 服务端
集群搭建
步骤
本章节将示范三台zookeeper服务端
集群搭建
步骤。
二当家的素材网
·
2024-02-07 03:27
运维
Zookeeper
教程
zookeeper
linux
分布式
深度解析kafka broker网络模型运行原理
原创不易,转载请注明出处文章目录前言1.kafka网络模型运行原理2.对比一下
RocketMQ
的网络模型总结前言本文将介绍下kafkabroker端的网络模型,会从宏观角度介绍下kafkabroker网络模型是啥样子的
$码出未来
·
2024-02-07 02:59
kafka源码解析
kafka网络模型
kafka网络模型运行原理
kafka
accept
RocketMQ
启动报错解决:Using the DefNew young collector with the CMS collector is deprecated and will likely
启动nameserver报错了,如下[root@localhost~]#mqnamesrvJavaHotSpot(TM)64-BitServerVMwarning:UsingtheDefNewyoungcollectorwiththeCMScollectorisdeprecatedandwilllikelyberemovedinafuturereleaseJavaHotSpot(TM)64-Bit
fyihdg
·
2024-02-06 19:00
rocketmq
java
java
开发语言
K8S
集群搭建
1.28.x
1、Kubernetes集群规划主机名IP地址说明master192.168.33.201主节点node1192.168.33.202从节点noide2192.168.33.202从节点2、准备环境1、关闭防火墙systemctlstopfirewalldsystemctldisablefirewalld2、关闭selinuxsed-i's/enforcing/disabled/'/etc/sel
程丶的摆烂日常
·
2024-02-06 18:26
k8s
kubernetes
云原生
RocketMQ
-Producer
rocketmq
发送端的设计1、需要考虑什么?
丑人林宗己
·
2024-02-06 17:27
SpringBoot 集成 atomikos 实现分布式事务
例如
rocketMQ
.本文是介绍的一种基于XA事
jsl小时光
·
2024-02-06 15:08
spring
boot
分布式
后端
rocketMQ
集群部署
rocketMQ
集群部署
rocketMQ
安装包下载wgethttps://github.com/alibaba/
RocketMQ
/archive/v3.5.8.tar.gz//注:到github下载为未编译的包
戏 剧
·
2024-02-06 14:04
rocketMQ
rocketMQ
java
demo
redis
集群搭建
(基于redis5.0+)
一、前戏1.1下载软件去官网下载软件:https://redis.io/download,笔者使用的是5.0.12,理由就是本人公司使用的也是这个版本。1.2物理机配置本人搭建的是3主3从。使用3台虚拟机,保证主从分配不在一台机器上,避免某台机器挂掉而影响整个集群的运行。物理配置:1.192.168.37.133:63702.192.168.37.133:63803.192.168.37.130:
She_lock
·
2024-02-06 12:51
redis
redis5.0集群
redis集群常见错误
redis启动脚本
redis集群最简配置
RabbitMQ
集群搭建
rabbitMQ的两种重要特性,异步化提高系统抗峰值能力和系统及功能解耦,这两个特点决定了rabbitMQ在我们的系统中占据了重要的地位,所以为了让RabbitMQ高可用,我们今天就来讲解下RabbitMQ的集群环境搭建应用常识一般情况下,一个单机版的rabbitMQ能承受大运1000/s的消息量(跟网络和消息的大小有关,数值存在波动),但是如果是集群环境中,就可以将访问的压力分摊到集群中的其他节
AmosZhu
·
2024-02-06 10:12
minio
集群搭建
(纠删码模式)
搭一个4个节点,16块硬盘的minio集群。1.先做一些准备工作,新建了4个centos7的虚拟机,各新添加4块硬盘我用的虚拟机软件是VirtualBox,先搭建4个虚拟机,即4个节点,建虚拟机就不讲了用VirtualBox添加硬盘,这几台虚拟机硬盘我都添加过了,我用一个其他node35这个机器介绍硬盘添加添加磁盘这块我也不是特别懂,但是在搭建minio集群的过程中我是这么做的,而且成功了下一步,
hahaha 1hhh
·
2024-02-06 09:52
minio
centos
Kafka 使用手册
2.kafka基础架构3.kafka
集群搭建
4.kafka命令行操作主题命令行【topic】生产者命令行【producer】消费者命令行【consumer】5.kafka生产者生产者消息发送流程Producer
@lihewei
·
2024-02-06 08:01
kafka
分布式
kafka基本概念
文章目录前言为什么需要KafkaKafka的优势Kafka应用场景Kafka消费模式Kafka的基础架构前言我们小猿在学习到kafka这门技术的时候,相信大家已经学习过其它消息队列中间件,例如RabbitMq、
RocketMq
欲无缘
·
2024-02-06 07:58
#
Kafka
kafka
分布式
ELFK日志采 - QuickStart
文章目录架构选型ELKEFLKElasticsearchES
集群搭建
常用命令Filebeat功能介绍安装步骤Filebeat配置详解filebeat常用命令Logstash功能介绍安装步骤Input插件
@lihewei
·
2024-02-06 07:25
elk
Redis(三)主从架构、Redis哨兵架构、Redis集群方案对比、Redis高可用
集群搭建
、Redis高可用集群之水平扩展
转自极客时间Redis主从架构redis主从架构搭建,配置从节点步骤:1、复制一份redis.conf文件2、将相关配置修改为如下值:port6380pidfile/var/run/redis_6380.pid#把pid进程号写入pidfile配置的文件logfile"6380.log"dir/usr/local/redis-5.0.3/data/6380#指定数据存放目录#需要注释掉bind#b
_蓝天IT_
·
2024-02-06 07:37
分布式
redis
架构
java
MongoDB分片
集群搭建
----前言mongodb分片一般用得比较少,需要较多的服务器,还有三种的角色一般把mongodb的副本集应用得好就足够用了,可搭建多套mongodb复本集mongodb分片技术mongodb副本集可以解决数据备份、读性能的问题,但由于mongodb副本集是每份数据都一模一样的,无法解决数据量过大问题mongodb分片技术能够把数据分成两份存储,假如shijiange.myuser里面有1亿条数据
ZzzkiYoumi
·
2024-02-06 06:21
MongoDB
mongodb
数据库
dba
RocketMQ
和Kafka的区别,以及如何保证消息不丢失和重复消费
消息队列
RocketMQ
和Kafka的区别性能(单台)语言多语言支持客户端优缺点
RocketMQ
十万级javajava模型简单、接口易用,在阿里有大规模应用文档少,支持的语言少Kafka百万级服务端scala
Marciaguoguo
·
2024-02-06 04:38
中间件
rocketmq
kafka
分布式
RocketMQ
:消息存储
通常来说我们对分布式队列有高可靠性的要求,所以数据要进行持久化存储。消息生产者发送消息到MQ。MQ收到消息,将消息进行持久化,即在存储系统中新增一条记录。返回ACK确认消息给生产者。然后MQ推送消息给对应的消费者,等待消费者返回ACK。如果消息消费者在指定时间内成功返回ACK,那么MQ认为消息消费成功,在存储系统中删除消息,即执行第6步;如果MQ在指定时间内没有收到ACK,则认为消息消费失败,会尝
Anbang713
·
2024-02-06 04:24
2.
RocketMQ
集群搭建
与消息发送样例
1.
RocketMQ
集群搭建
1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker:消息的存储者。
lambdaCC
·
2024-02-06 00:58
Docker Compose 部署
RocketMQ
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、DockerCompose部署
RocketMQ
二、部署步骤1.
MarchAwake
·
2024-02-05 23:51
rocketmq
docker
docker
rocketmq
容器
消息中间件之
RocketMQ
源码分析(五)
消费进度保存机制消费者启动时会同时启动位点管理器,
RocketMQ
设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时,位点由客户端提交给Broker保存.广播消费时,位点保存在消费者本地磁盘上
coffee_babe
·
2024-02-05 20:57
消息中间件
java-rocketmq
rocketmq
java
RocketMQ
消息队列(一)—— 基本概念和消息类型
RocketMQ
是一个来自阿里巴巴的分布式消息中间件,于2012年开源,并在2017年正式成为Apache顶级项目。
断剑zou天涯
·
2024-02-05 18:05
微服务架构
#
RocketMQ
rocketmq
Kafka2.13
集群搭建
并配置hosts172.17.0.2 node0172.17.0.3 node1172.17.0.4 node2在其中一台服务器中搭建Zookeeper(单机或集群都可以)Zookeeper
集群搭建
参考链接下载
咩哥无敌
·
2024-02-05 17:57
kafka
kafka
zookeeper
分布式
6.Linux虚拟机下的Hadoop
集群搭建
之完全分布式配置
Hadoop及相关组件搭建指导WeChat:h19396218469hadoop-3.1.3jdk-8u162-linux-x64本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、配置Hadoop集群主节点1.进入目标文件夹。cd/usr/local/hadoop/etc/ha
学习BigData
·
2024-02-05 13:01
关于Hadoop的学习笔记
hadoop
分布式
linux
4.Linux虚拟机下的Hadoop
集群搭建
之Xshell及Xftp的使用和SSH服务配置
Hadoop及相关组件搭建指导WeChat:h19396218469本案例软件包:链接:https://pan.baidu.com/s/1ighxbTNAWqobGpsX0qkD8w提取码:lkjh(若链接失效在下面评论,我会及时更新)一、Xshell和Xftp的使用在这里我们首先要了解两个软件,一个是Xshell另一个是Xftp。1.Xshell是一个强大的安全终端模拟软件,它支持SSH1,SS
学习BigData
·
2024-02-05 13:31
关于Hadoop的学习笔记
linux
hadoop
ssh
SpringCloud-消息驱动(Stream、生产者、消费者)
SpringCloud消息驱动StreamSpringCloudStream,的诞生是为了解决各种消息中间件之间的兼容性问题,学习过消息中间件的同学都知道现在市面上流行的消息中间件有ActiveMQ、RabbitMQ、
RocketMQ
JolyouLu
·
2024-02-05 12:30
SpringCloud
spring
cloud
rabbitmq
kafka
stream
分布式
微服务入门篇:Nacos注册中心(Nacos安装,快速入门,多级存储,负载均衡,环境隔离,配置管理,热更新,
集群搭建
,nginx反向代理)
目录1.Nacos安装1.官网下载2.解压到本地3.启动nacos2.Nacos快速入门1.在父工程中导入nacos依赖2.给子项目添加客户端依赖3.修改对应服务的配置文件4.启动服务,查看nacos发现情况3.Nacos服务多级存储模型4.NacosRule负载均衡5.服务实例的权重设置6.环境隔离(namespace)7.Nacos和Eureka的对比1.临时实例和非临时实例2.Nacos与e
JungleiRim
·
2024-02-05 10:39
微服务学习
微服务
负载均衡
架构
第二章
RocketMQ
的安装与启动
2、主题(Topic)Topic表示一类信息的集合,每个主题包含若干条消息,每条消息只能属于一个主题,是
RocketMQ
进行消息订阅的基本单位。
小七学爪哇
·
2024-02-05 10:45
rocketmq
kafka高可用
集群搭建
kafka高可用
集群搭建
说明这篇博文主要是为了后面的elk做准备,我们这里搭建一个kafka集群,使用2个节点,还是前面的节点。主要是为了后面做数据缓冲。
憧憬blog
·
2024-02-05 09:40
分布式
kafka
java
zookeeper
linux
RocketMQ
设计
.Remoting通信类结构2.协议设计与编解码3.消息的通信方式和流程4.Reactor多线程设计三、消息过滤四、负载均衡1.Producer的负载均衡2.Consumer的负载均衡五、事务消息1.
RocketMQ
倜傥村的少年
·
2024-02-05 08:19
java-rocketmq
rocketmq
java
RocketMQ
之事务消息原理
文章目录前言传统XA事务方案:性能不足基于普通消息方案:一致性保障困难基于Apache
RocketMQ
分布式事务消息:支持最终一致性功能原理事务消息整体流程使用限制使用示例使用建议前言
RocketMQ
的事务消息是为了解决分布式事务的问题
倜傥村的少年
·
2024-02-05 08:19
rocketmq
事务消息
Spring Boot+
RocketMQ
实现多实例分布式环境下的事件驱动
2整合
RocketMQ
依赖版本引入
RocketMQ
依赖解决SpringBoot3+不兼容spring.factories参考配置文件3
RocketMQ
使用解决SpringBoot3+不支持spring.factories
漫走云雾
·
2024-02-05 06:07
java-rocketmq
spring
boot
rocketmq
Nacos 集群
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
漠丶小翁
·
2024-02-05 04:12
一文讲透微服务下如何保证事务的一致性
文章目录从本地事务到分布式事务的演变强一致性解决方案2.1.二阶段提交协议2.2.三阶段提交协议最终一致性解决方案3.1.TCC模式3.2.补偿模式3.3.可靠事件模式开源项目的分布式事务实现解读4.1.
RocketMQ
4.2
chen_chen_chen_
·
2024-02-05 03:11
RocketMQ
源码分析(五)消息的存储
RocketMQ
存储的文件主要包括Comitlog文件、ConsumeQueue文件、IndexFile文件。CommitLog:消息存储文件,所有消息主题的消息都存储在CommitLog文件中。
甘_
·
2024-02-04 21:16
Hadoop
集群搭建
以下是一个基本的Hadoop
集群搭建
流程,假设你已经有了一些基础的Linux操作系统知识,并且准备在多台机器上搭建一个简单的Hadoop集群。
终将老去的穷苦程序员
·
2024-02-04 19:53
hadoop
Kafka、ActiveMQ、RabbitMQ、
RocketMQ
都有什么优点和缺点
Kafka、ActiveMQ、RabbitMQ、
RocketMQ
都有什么区别,以及适合哪些场景?面试官心理分析其实面试官主要是想看看:你知不知道你们系统里为什么要用消息队列这个东西?
上善若泪
·
2024-02-04 18:12
RocketMQ
安装与基本使用
RocketMQ
在
RocketMQ
中有NameServer、Broker、生产者、消费者四种角色。
Artisan_w
·
2024-02-04 11:05
分布式与微服务架构
rocketmq
M1 Mac docker手动编译
rocketmq
M1docker手动编译
rocketmq
文章目录M1docker手动编译
rocketmq
构建`
rocketmq
-docker`镜像构建
rocketmq
-console创建配置文件构建
rocketmq
-docker
丁川
·
2024-02-04 11:46
微服务学习笔记和解决方案
docker
java-rocketmq
macos
大数据入门--zookeeper(一)--
集群搭建
与常用指令
Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf,只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#
许中宝
·
2024-02-04 11:40
大数据
zookeeper
大数据
zookeeper
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki4
·
2024-02-04 11:08
nacos
集群搭建
Nacos
集群搭建
1.集群结构图官方给出的Nacos集群图:其中包含3个nacos节点,然后一个负载均衡器代理3个Nacos。这里负载均衡器可以使用nginx。
程序媛9688
·
2024-02-04 07:04
oracle
数据库
RabbitMQ
集群搭建
1.规划节点192.168.200.4---rabbitmq1---RabbitMQ磁盘节点192.168.200.5—rabbitmq2—RabbitMQ内存节点192.168.200.6—rabbitmq3—RabbitMQ内存节点使用OpenStack平台创建三台云主机进行实验,云主机镜像使用提供的CentOS_7.5_x86_64_XD.qcow2镜像,flavor使用1核/2G内存/20
曹博Blog
·
2024-02-04 05:54
Linux
rabbitmq
ruby
centos
Docker安装
RocketMQ
笔记
RocketMQ
架构上主要分为四部分:Producer:消息发布的角色,支持分布式集群方式部署。
KEEPMA
·
2024-02-04 04:24
skywalking
笔记
详解
RocketMQ
中的consumer
RocketMQ
的Consumer创建启动流程(1)Push和Pull这两种方式,本质都是Pull实现的,所以DefaultMQPullConsumerImpl的start方法启动(2)配置通知方式:广播
0X码上链
·
2024-02-03 23:20
VIP
优化缓存技术
分布式技术
java
rocketmq
java-rocketmq
第一章
RocketMQ
概述
1、MQ概述1、MQ简介MQ,MessageQueue,是一种提供消息队列服务的中间件,也称为消息中间件,是一套提供了消息生产、存储、消费全过程API的软件系统。消息即数据。一般消息的体量不会很大。2、MQ用途从网上可以查看到很多的关于MQ用途的概述,但总结起来其实就以下三点。限流削峰MQ可以将系统的超量请求暂存其中,以便系统后期可以慢慢进行处理,从而避免了请求的丢失或系统被压垮。异步解耦上游系统
小七学爪哇
·
2024-02-03 19:39
RocketMQ
java-rocketmq
rocketmq
java
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他