集群中有三个主节点,三个从节点,一共六个结点。因此要构建六个redis的docker容器。在宿主机中将这六个独立的redis结点关联成一个redis集群。需要用到官方提供的ruby脚本。
本文选择版本为redis-3.0.7,如果需要其他版本,直接修改wget后面地址中的版本号即可。
代码清单2-1 下载&编译redis源码包
# mkdir –p /usr/docker_root/redis_cluster
# cd /usr/docker_root/redis_cluster
# wget http://download.redis.io/releases/redis-3.0.7.tar.gz
# tar zxvf redis-3.0.7.tar.gz
# cd redis-3.0.7
# make
PS: 如果你连 # 也复制了,那你还是别看了……
我们已经在宿主机编译好了redis源码,在src路径下有我们需要的可执行文件:redis-cli,redis-server和redis-trib.rb。redis-trib.rb是redis官方提供的ruby脚本,用来构建redis集群
图2-1 src路径下的可执行文件
修改redis.conf。在redis-3.0.7的根路径下有redis的配置文件redis.conf。将其移动到上一级路径/usr/docker_root/redis_cluster/ 下。
依据代码清单2-2,修改redis.conf文件中的对应参数值。
daemonize : 是否后台运行,将其设为no,表示前台运行。
port : redis服务监听的端口。
logfile : 指定日志文件路径。
appendonly : 是否开启appendonlylog,开启的话每次写操作会记一条log,这会提高数据抗风险能力,但影响效率。
cluster-node-timeout : 集群结点超时限制。
代码清单2-2 需要修改的配置参数
daemonize no
port 6379
logfile "/var/log/redis/redis-server.log"
appendonly yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
下面构建redis基础镜像。以Dockerfile方式构建。
代码清单2-3 创建redis基础镜像的Dockerfile
# pwd
/usr/docker_root/redis_cluster
# vim Dockerfile
代码清单2-4 Dockerfile
FROM ubuntu:14.04
ADD redis-3.0.7.tar.gz /
RUN mkdir -p /redis
ADD redis.conf /redis/
RUN apt-get -yqq update
RUN apt-get install -y gcc make
WORKDIR /redis-3.0.7
RUN make
RUN mv /redis-3.0.7/src/redis-server /redis/
WORKDIR /
RUN rm -rf /redis-3.0.7
RUN apt-get remove --purge -y gcc make
VOLUME ["/var/log/redis/"]
EXPOSE 6379
将我们修改后的配置文件也复制到镜像内。
为编译源码包,需要安装gcc和make,安装之前先更新apt-get。更新和安装时间较长。
编译源码包。当然编译也需要一段时间。
编译后,容器中只需要可执行文件redis-server,所以将该文件移到/redis/路径下。现在redis-server 和redis.conf都在/redis/下。
将redis-3.0.7路径整个删除。
gcc和make也可以卸载掉。
指定数据卷,通过这个数据卷可以查看redis运行的日志文件。
公开redis默认端口6379。
因为不会执行这个镜像,所有没有包含ENTRYPOINT和CMD指令。我们基于这个镜像构建别的镜像。
现在我们构建redis基础镜像
代码清单2-5 构建redis基础镜像
# docker build -t zcq/redis_base .
图2-2 zcq/redis_base镜像信息
我们继续构建redis结点镜像,这个镜像将会用于生成提供redis服务的docker容器。
代码清单3-1 创建redis结点镜像的Dockerfile
# mkdir redis_node
# cd redis_node
# vim Dockerfile
代码清单3-2 redis结点镜像Dockerfile
FROM zcq/redis
ENTRYPOINT ["/redis/redis-server", "/redis/redis.conf"]
构建redis结点镜像。
代码清单3-3 构建redis结点镜像
# docker build -t zcq/redis_cluster_node .
图3-1 zcq/ redis_cluster_node镜像信息
依次创建六个redis结点容器,如代码清单4-1所示。
代码清单4-1 创建redis结点
# docker run -d --name redis01 -p 30001:6379 zcq/redis_cluster_node
# docker run -d --name redis02 zcq/redis_cluster_node
# docker run -d --name redis03 zcq/redis_cluster_node
# docker run -d --name redis04 zcq/redis_cluster_node
# docker run -d --name redis05 zcq/redis_cluster_node
# docker run -d --name redis06 zcq/redis_cluster_node
查看各容器IP地址
代码清单4-2 查看redis结点IP
# docker inspect redis01 redis02 redis03 redis04 redis05 redis06 | grep \"IPAddress\"
172.17.0.66
172.17.0.67
172.17.0.68
172.17.0.69
172.17.0.70
172.17.0.71
图4-1 所有redis结点的IP
前文已经提到,要构建集群需要使用官方提供的ruby脚本,也就是redis-3.0.7/src/redis-trib.rb,因此需要先安装ruby的环境。
代码清单5-1 安装ruby环境
# yum install ruby
# yum install rubygems
运行redis-trib.rb脚本还需要安装redis的ruby包。
代码清单5-2 安装redis的ruby包
# gem install redis --version 3.0.7
download地址:http://rubygems.org/gems/redis/versions/3.0.7
代码清单5-3 手动下载&安装redis的ruby包
# wget https://rubygems.org/downloads/redis-3.0.7.gem --no-check-certificate
# gem install -l redis-3.0.7.gem
代码清单5-4 搭建redis集群
# cd /usr/docker_root/redis_cluster/redis-3.0.7/src/
# ./redis-trib.rb create --replicas 1 172.17.0.66:6379 \
172.17.0.67:6379 \
172.17.0.68:6379 \
172.17.0.69:6379 \
172.17.0.70:6379 \
172.17.0.71:6379
代码清单5-5 搭建redis集群输出结果
>>> Creating cluster
>>> Performing hash slots allocation on 6 nodes...
Using 3 masters:
172.17.0.69:6379
172.17.0.68:6379
172.17.0.67:6379
Adding replica 172.17.0.66:6379 to 172.17.0.69:6379
Adding replica 172.17.0.71:6379 to 172.17.0.68:6379
Adding replica 172.17.0.70:6379 to 172.17.0.67:6379
S: 53d5136dfc65dde54372c9b19a07dde922d68018 172.17.0.66:6379
replicates e33bf44633a1dcc5a92feec0c2f54846707213b5
M: c16ca51f791743e5623180548abce932f26e03a2 172.17.0.67:6379
slots:10923-16383 (5461 slots) master
M: e8f5a60690fca6388bedbb88b8d58e15a32d169a 172.17.0.68:6379
slots:5461-10922 (5462 slots) master
M: e33bf44633a1dcc5a92feec0c2f54846707213b5 172.17.0.69:6379
slots:0-5460 (5461 slots) master
S: 9ba61b899311622e13871952dc6248366d69dca2 172.17.0.70:6379
replicates c16ca51f791743e5623180548abce932f26e03a2
S: 0b33044326d5e2ee75d4035ed014349ea6d859b0 172.17.0.71:6379
replicates e8f5a60690fca6388bedbb88b8d58e15a32d169a
Can I set the above configuration? (type 'yes' to accept): yes
>>> Nodes configuration updated
>>> Assign a different config epoch to each node
>>> Sending CLUSTER MEET messages to join the cluster
Waiting for the cluster to join....
>>> Performing Cluster Check (using node 172.17.0.66:6379)
M: 53d5136dfc65dde54372c9b19a07dde922d68018 172.17.0.66:6379
slots: (0 slots) master
replicates e33bf44633a1dcc5a92feec0c2f54846707213b5
M: c16ca51f791743e5623180548abce932f26e03a2 172.17.0.67:6379
slots:10923-16383 (5461 slots) master
M: e8f5a60690fca6388bedbb88b8d58e15a32d169a 172.17.0.68:6379
slots:5461-10922 (5462 slots) master
M: e33bf44633a1dcc5a92feec0c2f54846707213b5 172.17.0.69:6379
slots:0-5460 (5461 slots) master
M: 9ba61b899311622e13871952dc6248366d69dca2 172.17.0.70:6379
slots: (0 slots) master
replicates c16ca51f791743e5623180548abce932f26e03a2
M: 0b33044326d5e2ee75d4035ed014349ea6d859b0 172.17.0.71:6379
slots: (0 slots) master
replicates e8f5a60690fca6388bedbb88b8d58e15a32d169a
[OK] All nodes agree about slots configuration.
>>> Check for open slots...
>>> Check slots coverage...
[OK] All 16384 slots covered.
使用redis-cli连接redis集群,注意有–c
代码清单5-6 连接redis集群
# redis-cli -p 30001 –c
127.0.0.1:30001> info
下面显示集群的相关信息
# Server
redis_version:3.0.7
redis_git_sha1:00000000
redis_git_dirty:0
(省略一部分……)
# CPU
used_cpu_sys:2.21
used_cpu_user:1.63
used_cpu_sys_children:0.00
used_cpu_user_children:0.00
# Cluster
cluster_enabled:1
# Keyspace
127.0.0.1:30001>
图5-1 set操作
看到了吗?Redirected to slot [15495] located at 172.17.0.67:6379。a的value被存储到172.17.0.67:6379结点上的槽[15495]里。下面的地址也变成了172.17.0.67:6379>。再试试get操作。
图5-2 get操作
大功告成!祝贺!!!