基础组件安装:
1、安装RocketMQ
1.1、服务器环境
序号 IP 用户名 密码 角色 模式
1 192.168.100.24 root nameServer1,brokerServer1 Master1 2m-noslave
2 192.168.100.25 root nameServer2,brokerServer2 Master2 2m-noslave
1.2、配置host信息
#使用 vi 或者 vim 编辑/etc/hosts
192.168.100.24 rocketmq-nameserver1
192.168.100.24 rocketmq-master1
192.168.100.25 rocketmq-nameserver2
192.168.100.25 rocketmq-master2
1.3、安装RocketMQ
#上传安装压缩包
使用rz命令上传本地已经下载好的alibaba-rocketmq-3.2.6.tar.gz安装包至/usr/local目录
#解压安装包
tar -zxvf alibaba-rocketmq-3.2.6.tar.gz -C /usr/local
#重命名(添加版本号)
mv alibaba-rocketmq alibaba-rocketmq-3.2.6
#创建软连接
ln -s alibaba-rocketmq-3.2.6 rocketmq
1.4、创建存储路径
mkdir /usr/local/rocketmq/store
mkdir /usr/local/rocketmq/store/commitlog
mkdir /usr/local/rocketmq/store/consumequeue
mkdir /usr/local/rocketmq/store/index
1.5、修改RocketMQ配置文件
1.5.1、编辑broker配置文件
vim /usr/local/rocketmq/conf/2m-noslave/broker-a.properties
vim /usr/local/rocketmq/conf/2m-noslave/broker-b.properties
1.5.2、broker-a|broker-b详细配置
#所属集群名字
brokerClusterName=rocketmq-cluster
#broker名字,注意此处不同的配置文件填写的不一样
brokerName=broker-a|broker-b
#0 表示 Master,>0 表示 Slave
brokerId=0
#nameServer地址,分号分割
namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
#在发送消息时,自动创建服务器不存在的topic,默认创建的队列数
defaultTopicQueueNums=4
#是否允许 Broker 自动创建Topic,建议线下开启,线上关闭
autoCreateTopicEnable=true
#是否允许 Broker 自动创建订阅组,建议线下开启,线上关闭
autoCreateSubscriptionGroup=true
#Broker 对外服务的监听端口
listenPort=10911
#删除文件时间点,默认凌晨 4点
deleteWhen=04
#文件保留时间,默认 48 小时
fileReservedTime=120
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
#ConsumeQueue每个文件默认存30W条,根据业务情况调整
mapedFileSizeConsumeQueue=300000
#destroyMapedFileIntervalForcibly=120000
#redeleteHangedFileInterval=120000
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
#存储路径
storePathRootDir=/usr/local/appserver/rocketmq/store
#commitLog 存储路径
storePathCommitLog=/usr/local/appserver/rocketmq/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/usr/local/appserver/rocketmq/store/consumequeue
#消息索引存储路径
storePathIndex=/usr/local/appserver/rocketmq/store/index
#checkpoint 文件存储路径
storeCheckpoint=/usr/local/appserver/rocketmq/store/checkpoint
#abort 文件存储路径
abortFile=/usr/local/appserver/rocketmq/store/abort
#限制的消息大小
maxMessageSize=65536
#flushCommitLogLeastPages=4
#flushConsumeQueueLeastPages=2
#flushCommitLogThoroughInterval=10000
#flushConsumeQueueThoroughInterval=60000
#Broker 的角色
#- ASYNC_MASTER 异步复制Master
#- SYNC_MASTER 同步双写Master
#- SLAVE
brokerRole=ASYNC_MASTER
#刷盘方式
#- ASYNC_FLUSH 异步刷盘
#- SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
#checkTransactionMessageEnable=false
#发消息线程池数量
#sendMessageThreadPoolNums=128
#拉消息线程池数量
#pullMessageThreadPoolNums=128
1.6、修改日志配置文件(两台服务器)
mkdir -p /usr/local/rocketmq/logs
cd /usr/local/rocketmq/conf
sed -i 's#${user.home}#/usr/local/rocketmq#g' *.xml
1.7、修改启动脚本
1.7.1、修改broker的JVM启动参数
vim /usr/local/rocketmq/bin/runbroker.sh
#==================================================================
# 开发环境JVM Configuration
#==================================================================
JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512m -XX:PermSize=128m -XX:MaxPermSize=320m"
1.7.2、修改nameServer的JVM启动参数
vim /usr/local/rocketmq/bin/runserver.sh
#==================================================================
# 开发环境JVM Configuration
#==================================================================
JAVA_OPT="${JAVA_OPT} -server –Xms2g –Xmx2g -Xmn512m -XX:PermSize=128m -XX:MaxPermSize=320m"
1.8、启动NameServer(两台服务器)
注意:必须先启动NameServer,然后再启动BrokerServer。
cd /usr/local/rocketmq/bin
nohup sh mqnamesrv &
1.9、启动Broker
1.9.1、启动BrokerServer A【192.168.100.24】
cd /usr/local/appserver/rocketmq/bin
nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-noslave/broker-a.properties >/dev/null 2>&1 &
1.9.2、启动BrokerServer B【192.168.100.25】
cd /usr/local/appserver/rocketmq/bin
nohup sh mqbroker -c /usr/local/rocketmq/conf/2m-noslave/broker-b.properties >/dev/null 2>&1 &
检测服务是否启动正常的方式有如下三种:
a>侦听端口是否正常:
netstat –ntlp
b>或者通过jps
命令查看进程是否存在:
### Java Virtual Machine Process Status Tools
jps
c>查看启动日志:
tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/broker.log
tail -f -n 500 /usr/local/rocketmq/logs/rocketmqlogs/namesrv.log
1.10、Broker启动常见问题
多网卡服务器环境下,会出现com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <10.105.23.114:10911> failed异常。
解决办法:
可参考RocketMQ用户指南的12章,Broker配置参数一节。
a> 获取Broker的默认配置:
vim /usr/local/rocketmq/conf/2m-noslave/broker-a.properties
b> Broker启动时,如何加载配置:
### 第一步:生成Broker默认配置模板
sh mqbroker -m > broker.p
### 第二步:修改配置文件,即broker.p文件
注:将namesrvAddr=127.0.0.1:9876等配置信息补全,brokerServer启动不了的很大部分原因,是由于生成的配置文件信息不全造成的。至于为何会造成读取以及生成配置信息丢失的原因,在这不作深究。
### 第三步:加载修改完善过的配置文件
nohup sh mqbroker -c broker.p
Broker运行过程中,动态修改broker的配置,注意:并非所有配置项都支持动态变更。
### 修改地址为192.168.1.100:10911的Broker消息保存时间为24小时
sh mqadmin updateBrokerConfig -b 192.168.1.100:10911 -k fileReservedTime 24
1.11、RocketMQ监控管理平台
在tomcat中部署rocketmq-console.war
1.12、数据清理
cd /usr/local/appserver/rocketmq/bin
# sh mqshutdown broker
# sh mqshutdown namesrv
# 等待停止
# rm -rf /usr/local/appserver/rocketmq/store
# mkdir /usr/local/appserver/rocketmq/store
# mkdir /usr/local/appserver/rocketmq/store/commitlog
# mkdir /usr/local/appserver/rocketmq/store/consumequeue
# mkdir /usr/local/appserver/rocketmq/store/index
# 按照上面步骤重启NameServer与BrokerServer
1.13、客户端验证(静态寻址方式)
1.13.1、防火墙开放8080,9876,10911端口
其中,8080为nginx的侦听端口,9876为nameServer的默认端口,10911为broker-a的默认端口。
vim /etc/sysconfig/iptables
#新增如下入站规则:
-A INPUT -p tcp -m tcp --dport 8080 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 9876 -j ACCEPT
-A INPUT -p tcp -m tcp --dport 10911 -j ACCEPT
#使得防火墙新建的规则生效
service iptables save
1.13.2、配置nginx(修改nginx.conf配置文件,使用静态寻址方式)
#在http节点域下面新增server模块:
server {
listen 8080;
server_name localhost;
location /rocketmq {
root /data/nginx;
index index.html index.htm;
}
}
1.13.3、创建html文件
#创建目录
mkdir -p /data/nginx/rocketmq/nsaddr/
#切换目录
cd /data/nginx/rocketmq/nsaddr/
#创建index.html文件
vim index.html
#html内容写如下(此处ip为nginx服务器所在ip,使用静态寻址方式)
192.168.100.24:9876;
1.13.4、启动nginx
#切换到nginx所在的安装目录
cd /usr/local/nginx/sbin/
#启动nginx
sh ./nginx
#测试nginx配置文件的语法是否配置正确
./nginx –t
#重新加载nginx的配置文件使之立即生效
./nginx -s reload
1.13.5、查看一下nginx是否已经启动
ps –ef | grep nginx