基于docker的redis集群搭建

redis 集群搭建

redis集群搭建包含两个主要步骤：一是搭建若干单节点redis服务器，二是启动集群控制进程。集群模式至少需要6个节点（3master、3slave）

单节点搭建

1、下载安装包并解压：tar -zxvf /redis-3.2.1.tar.gz
2、编译安装：make && make install

• 配置
  redis.conf

daemonize yes
pidfile /var/run/redis_7001.pid
logfile "/home/appadmin/redis/dev/7001.log"
port 7001
cluster-enabled yes
cluster-config-file nodes_7001.conf
cluster-node-timeout 5000
appendonly yes

• 启动
  最好每个实例建立独立的文件夹，用来保存数据、配置、集群管理等信息

redis-server redis.conf

集群搭建

redis有多种集群方案，这里只关注官方redis cluster集群方案，不考虑其它如sentinel、codis等第三方集群方案。

安装

1、安装ruby和ruby-gem，高版本ruby自带gem

• yum 安装：yum install ruby
• 下载二进制包安装，类似redis
  2、安装ruby的redis接口
• 下载离线包：redis-3.3.0.gem
• 离线安装：gem install --local /home/appadmin/redis-3.3.0.gem

启动

./redis-trib.rb create --replicas 1 168.61.9.154:6001 168.61.9.154:6002 168.61.9.154:6003 168.61.9.154:6004 168.61.9.154:6005 168.61.9.154:6006

一个基于docker 的集群搭建实例

redis节点部署

• 拉取官方镜像包
• 提供独立配置文件 redis.conf

daemonize yes
pidfile /var/run/redis_7001.pid
logfile "/home/appadmin/redis/dev/7001.log"
port 7001
cluster-enabled yes
cluster-config-file nodes_7001.conf
cluster-node-timeout 5000
appendonly yes

根据实践，daemonize 应设置为no，否则无法容器启动，具体见：
https://segmentfault.com/q/1010000008272753

• 启动

docker run -p 6003:6379 -v /home/appadmin/redis/test:/data -d redis:3.2 redis-server --appendonly yes --cluster-enabled yes

可以加载外置文件，如下：

docker run -p 6001:6001 --net=host -v /home/appadmin/redis/test/6001:/data -d redis:3.2 redis-server /data/redis.conf

以上为针对集群的配置方式，docker采用host网络方式，端口不能重复

集群搭建

前提：已安装docker并下载redis官方镜像
1、redis.conf

logfile "/data/redis.log"
port 6379
cluster-enabled yes
cluster-config-file /data/nodes.conf
cluster-node-timeout 5000
appendonly yes
protected-mode no

2、多节点启动脚本：run.sh

#!/bin/bash
#清理
docker ps -a | grep "redis" | awk '{print $1 }'|xargs docker stop
rm -rf 600*
#创建目录
mkdir 6001
mkdir 6002
mkdir 6003
mkdir 6004
mkdir 6005
mkdir 6006
#配置文件
cp redis.conf 6001/
cp redis.conf 6002/
cp redis.conf 6003/
cp redis.conf 6004/
cp redis.conf 6005/
cp redis.conf 6006/
sed -i "s/6379/6001/g" 6001/redis.conf
sed -i "s/6379/6002/g" 6002/redis.conf
sed -i "s/6379/6003/g" 6003/redis.conf
sed -i "s/6379/6004/g" 6004/redis.conf
sed -i "s/6379/6005/g" 6005/redis.conf
sed -i "s/6379/6006/g" 6006/redis.conf
#启动
docker run -p 6001:6001 --net=host -v /home/appadmin/redis/test/6001:/data -d redis:3.2 redis-server /data/redis.conf
docker run -p 6002:6002 --net=host -v /home/appadmin/redis/test/6002:/data -d redis:3.2 redis-server /data/redis.conf
docker run -p 6003:6003 --net=host -v /home/appadmin/redis/test/6003:/data -d redis:3.2 redis-server /data/redis.conf
docker run -p 6004:6004 --net=host -v /home/appadmin/redis/test/6004:/data -d redis:3.2 redis-server /data/redis.conf
docker run -p 6005:6005 --net=host -v /home/appadmin/redis/test/6005:/data -d redis:3.2 redis-server /data/redis.conf
docker run -p 6006:6006 --net=host -v /home/appadmin/redis/test/6006:/data -d redis:3.2 redis-server /data/redis.conf

3、启动集群

./redis-trib.rb create --replicas 1 168.61.9.154:6001 168.61.9.154:6002 168.61.9.154:6003 168.61.9.154:6004 168.61.9.154:6005 168.61.9.154:6006

客户端

1、客户端管理软件
2、redis-cli -c -p 7000
3、jedis

参考

redis集群搭建： http://www.cnblogs.com/yuanermen/p/5717885.html
基于docker搭建redis集群（有问题，直接用host模式）：http://www.cnblogs.com/wozijisun/p/6043511.html
集群管理：http://blog.csdn.net/cuiy6642/article/details/50924722
redis集群教程：http://www.cnblogs.com/li-peng/p/6143709.html

注意点：

• 集群模式启动需要对redis配置进行调整：
  允许外部主机访问：protected-mode no
  #bind 127.0.0.1
• 集群启动失败会导致数据残留，需要手动清理
• 配置完所有主节点后,报" ERR Invalid node address specified"
  由于Redis-trib.rb 对域名或主机名支持不好,故在创建集群的时候要使用ip:port的方式
  redis-trib.rb create ip1:port1 ip2:port2 ip3:port3
• 创建集群时报某个err slot 0 is already busy (redis::commanderror)
  这是由于之间创建集群没有成功,需要将nodes.conf和dir里面的文件全部删除(注意不要删除了redis.conf)
• 创建集群时一直处于"Waiting for the cluster to join...................................."的状态
  这个问题原因不知,但解决方法是在redis.conf文件中把bind 127.0.0.1本地环回口改为物理接口.
• 安装ruby redis时长时间没响应
  这是由于天朝网络,解决办法是改ruby源(请自行baidu)或手动安装