转载:https://www.jianshu.com/p/8045b92fafb2
Redis系统介绍:
Redis的基础介绍与安装使用步骤:https://www.jianshu.com/p/2a23257af57b
Redis的基础数据结构与使用:https://www.jianshu.com/p/c95c8450c5b6
Redis核心原理:https://www.jianshu.com/p/4e6b7809e10a
Redis 5 之后版本的高可用集群搭建:https://www.jianshu.com/p/8045b92fafb2
Redis 5 版本的高可用集群的水平扩展:https://www.jianshu.com/p/6355d0827aea
Redis 5 集群选举原理分析:https://www.jianshu.com/p/e6894713a6d5
Redis 5 通信协议解析以及手写一个Jedis客户端:https://www.jianshu.com/p/575544f68615
集群方案比较:
redis3.0版本的集群模式
哨兵模式:
在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态,如果master节点异常,则会做主从切换,将某一台slave作为master,哨兵的配置略微复杂,并且性能和高可用性等各方面表现一般,特别是在主从切换的瞬间存在访问瞬断的情况,而且哨兵模式只有一个主节点对外提供服务,没法支持很高的并发,且单个主节点内存也不宜设置得过大,否则会导致持久化文件过大,影响数据恢复或主从同步的效率。
高可用集群模式:
redis集群是一个由多个主从节点群组成的分布式服务器群,它具有复制、高可用和分片特性。Redis集群不需要sentinel哨兵也能完成节点移除和故障转移的功能。需要将每个节点设置成集群模式,这种集群模式没有中心节点,可水平扩展,据官方文档称可以线性扩展到上万个节点(官方推荐不超过1000个节点)。redis集群的性能和高可用性均优于之前版本的哨兵模式,且集群配置非常简单。
开始搭建
一、安装redis
参考:Redis的基础介绍与安装使用步骤
https://www.jianshu.com/p/2a23257af57b
下载地址:http://redis.io/download
1、安装gcc
yum install gcc
2、把下载好的redis-5.0.2.tar.gz放在/usr/local文件夹下,并解压
wget http://download.redis.io/releases/redis-5.0.2.tar.gz
tar xzf redis-5.0.2.tar.gz
cd redis-5.0.2
3、进入到解压好的redis-5.0.2目录下,进行编译与安装
make & make install
make & make install安装出现错误则使用
make MALLOC=libc
4、启动并指定配置文件
src/redis-server redis.conf
(注意要使用后台启动,所以修改redis.conf里的daemonize改为yes)
5、验证启动是否成功
ps -ef | grep redis
6、进入redis客户端
cd /usr/local/redis/redis-5.0.2/src
./redis-cli
7、退出客户端
exit
8、退出redis服务:
pkill redis-server
kill 进程号
src/redis-cli shutdown
二、开始集群搭建
redis集群需要至少要三个master节点,我们这里搭建三个master节点,并且给每个master再搭建一个slave节点,总共6个redis节点,这里用一台机器(可以多台机器部署,修改一下ip地址就可以了)部署6个redis实例,三主三从,搭建集群的步骤如下:
第一步:在第一台机器的/usr/local/redis-5.0.2下创建文件夹redis-cluster,然后在其下面创建6个文件夾如下:
mkdir -p /usr/local/redis-5.0.2/redis-cluster
mkdir 8001 8002 8003 8004 8005 8006
第二步:把 /usr/local/redis-5.0.2下的redis.conf配置文件分别copy到800 123456下,修改如下内容:
(1)daemonize yes
(2)port 8001(分别对每个机器的端口号进行设置)
(3)dir /usr/local/redis-cluster/8001/(指定数据文件存放位置,必须要指定不同的目录位置,不然会丢失数据)
(4)cluster-enabled yes(启动集群模式)
(5)cluster-config-file nodes-8001.conf(集群节点信息文件,这里800x最好和port对应上)
(6)cluster-node-timeout 5000
(7) # bind 127.0.0.1(去掉bind绑定访问ip信息)
(8) protected-mode no (关闭保护模式)
(9)appendonly yes
如果要设置密码需要增加如下配置:
(10)requirepass xxx (设置redis访问密码)
(11)masterauth xxx (设置集群节点间访问密码,跟上面一致)
第三步:把修改后的配置文件,copy到8002-8006,修改第2、3、5项里的端口号,可以用批量替换:
:%s/源字符串/目的字符串/g
第四步:分别启动6个redis实例,然后检查是否启动成功
/usr/local/redis/redis-5.0.2/src/redis-server /usr/local/redis-cluster/8001/redis.conf
/usr/local/redis/redis-5.0.2/src/redis-server /usr/local/redis-cluster/8002/redis.conf
/usr/local/redis/redis-5.0.2/src/redis-server /usr/local/redis-cluster/8003/redis.conf
....
查看是否启动成功
ps -ef | grep redis
第五步:用redis-cli创建整个redis集群(redis5以前的版本集群是依靠ruby脚本redis-trib.rb实现)
/usr/local/redis/redis-5.0.2/src/redis-cli -a xxx --cluster create 192.168.5.100:8001 192.168.5.100:8002 192.168.5.100:8003 192.168.5.100:8004 192.168.5.100:8005 192.168.5.100:8006
代表为每个创建的主服务器节点创建一个从服务器节点
第七步:验证集群:
(1)连接任意一个客户端即可:
./redis-cli -c -a xxx -h 192.168.5.100 -p 8001
(-a访问服务端密码,-c表示集群模式,指定ip地址和端口号)
如:
/usr/local/redis-5.0.2/src/redis-cli -a xxx -c -h 192.168.5.100 -p 8001
注意这里进入到8002了,这个回头再说
(2)进行验证: cluster info(查看集群信息)、cluster nodes(查看节点列表)
(3)进行数据操作验证
(4)关闭集群则需要逐个进行关闭,使用命令:
/usr/local/redis/src/redis-cli -a xxx -c -h 192.168.0.60 -p 8001 shutdown