RocketMQ主从节点环境的搭建

RocketMQ主从环境的搭建其实也比较简单，下面我们以两台服务器（主节点192.168.11.81和从节点192.168.11.82）做一个例子进行讲解。下面我们先以主节点81节点做一个搭建和配置，然后再配置82从节点。

1）配置我们的hosts信息

vim /etc/hosts

192.168.11.81    rocketmq-nameserver1 
192.168.11.81    rocketmq-master1 
192.168.11.82    rocketmq-nameserver2 
192.168.11.82    rocketmq-master1-slave

2）/usr/local目录下新建一个文件software

mkdir software

上传下载好的 apache-rocketmq.tar.gz 文件到新建的文件里面

3）/usr/local路径下新建一个名为apache-rocketmq的文件夹并将之前存放在software里的压缩包解压到此文件中

tar -zxvf apache-rocketmq.tar.gz -C /usr/local/apache-rocketmq

4）创建一个软链接

ln -s apache-rocketmq rocketmq

5）创建四个关键数据文件的存储路径

mkdir /usr/local/rocketmq/store

mkdir /usr/local/rocketmq/store/commitlog

mkdir /usr/local/rocketmq/store/consumequeue

mkdir /usr/local/rocketmq/store/index

6）修改日志配置文件并作文件的替换

mkdir -p /usr/local/rocketmq/logs

cd /usr/local/rocketmq/conf && sed -i 's#${user.home}#/usr/local/rocketmq#g' *.xml

7）修改启动脚本参数

vim /usr/local/rocketmq/bin/runbroker.sh

JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn1g"

vim /usr/local/rocketmq/bin/runserver.sh

JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512m -XX:PermSize=128m XX:MaxPermSize=320m"

8）进入RocketMQ 配置文件，然后做详细的配置

vim /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties

#所属集群名字
 
brokerClusterName=rocketmq-cluster
 
#broker 名字，注意此处不同的配置文件填写的不一样
 
brokerName=broker-a
 
#0 表示 Master，>0 表示 Slave
 
brokerId=0
 
#nameServer 地址，分号分割
 
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
 
#在发送消息时，自动创建服务器不存在的 topic，默认创建的队列数
 
defaultTopicQueueNums=4
 
#是否允许 Broker 自动创建 Topic，建议线下开启，线上关闭
 
autoCreateTopicEnable=true
 
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
 
autoCreateSubscriptionGroup=true
 
#Broker 对外服务的监听端口
 
listenPort=10911
 
#删除文件时间点，默认凌晨 4 点
 
deleteWhen=04
 
#文件保留时间，默认 48 小时
 
fileReservedTime=120
 
#commitLog 每个文件的大小默认 1G
 
mapedFileSizeCommitLog=1073741824
 
#ConsumeQueue 每个文件默认存 30W 条，根据业务情况调整
 
mapedFileSizeConsumeQueue=300000
 
#destroyMapedFileIntervalForcibly=120000
 
#redeleteHangedFileInterval=120000
 
#检测物理文件磁盘空间
 
diskMaxUsedSpaceRatio=88
 
#存储路径
 
storePathRootDir=/usr/local/rocketmq/store
 
#commitLog 存储路径
 
storePathCommitLog=/usr/local/rocketmq/store/commitlog
 
#消费队列存储路径存储路径
 
storePathConsumeQueue=/usr/local/rocketmq/store/consumequeue
 
#消息索引存储路径
 
storePathIndex=/usr/local/rocketmq/store/index
 
#checkpoint 文件存储路径
 
storeCheckpoint=/usr/local/rocketmq/store/checkpoint
 
#abort 文件存储路径
 
abortFile=/usr/local/rocketmq/store/abort
 
#限制的消息大小
 
maxMessageSize=65536
 
#flushCommitLogLeastPages=4
 
#flushConsumeQueueLeastPages=2
 
#flushCommitLogThoroughInterval=10000
 
#flushConsumeQueueThoroughInterval=60000
 
#Broker 的角色
 
#- ASYNC_MASTER 异步复制 Master
 
#- SYNC_MASTER 同步双写 Master
 
#- SLAVE
 
brokerRole=ASYNC_MASTER
 
#刷盘方式
 
#- ASYNC_FLUSH 异步刷盘
 
#- SYNC_FLUSH 同步刷盘
 
flushDiskType=ASYNC_FLUSH
 
#checkTransactionMessageEnable=false
 
#发消息线程池数量
 
#sendMessageThreadPoolNums=128
 
#拉消息线程池数量
 
#pullMessageThreadPoolNums=128

至此我们81的主节点配置完毕。下面我们再来搭建82从节点。

82从节点的搭建和配置基本与81主节点一致，只不过在配置文件中略微有一点不同

前七个步骤都一样，按照主节点的搭建步骤重复执行即可

不同在第八个步骤的配置文件中，其他基本配置也保持一致，唯一不同的两点下面特殊指出，配置的时候找到该地做一下82这个从节点的特殊配置修改一下即可

这里82从节点配置的文件是【broker-a-s.properties】，进行以下修改

#Broker 的角色
#- ASYNC_MASTER 异步复制 Master 
#- SYNC_MASTER 同步双写 Master
#- SLAVE
brokerRole=SLAVE
#0 表示 Master，>0 表示 Slave 
brokerId=1

【broker-a.properties】和【broker-a-s.properties】在81节点配置完成之后需要将其拷贝到82从节点一份，虽然我们的81主节点用的是【broker-a.properties】配置文件，82用的是【broker-a-s.properties】配置文件，但是这样我们两个节点都做一份相同的拷贝，也是为了后期运维更好的维护

至此我们的主从配置基本配置完成。需要特殊注意的是我们的集群搭建一定要注意nameServer 集群地址的配置，如下，在配置文件中一定要正确配置

#nameServer 地址，分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876

 

9）服务的启动。这里需要特殊说明的是必须先将所有的nameServer都启动成功才可以启动BrokerServer。这里也就是说分别先将81主节点的nameServer和82从节点的nameServer启动成功之后，再去分别启动两个节点的BrokerServer

启动nameServer

cd /usr/local/rocketmq/bin

nohup sh mqnamesrv &

启动BrokerServer

81主节点用到配置文件是【broker-a.properties】，所以启动命令如下：

cd /usr/local/rocketmq/bin

nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-a.properties >/dev/null 2>&1 &

82从节点用的配置文件时【broker-a-s.properties】，所以启动命令是：

cd /usr/local/rocketmq/bin

nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-2s-async/broker-a-s.properties >/dev/null 2>&1 &

 

10）启动完毕我们可以执行jps查看我们的进程是否启动成功，也可以去查看具体的log日志。

至此我们的RocketMQ主从节点环境的搭建完毕。