一、redis的高可用管理工具sentinel介绍
sentinel是一个管理redis实例的工具，它可以实现对redis的监控、通知、自动故障转移。sentinel不断的检测redis实例是否可以正常工作，通过API向其他程序报告redis的状态，
如果redis master不能工作，则会自动启动故障转移进程，将其中的一个slave提升（通过选举）为master，其他的slave重新设置新的master服务器。而故障的master再次启动后
会被sentinel自动降级为slave服务器加入到集群中。
redis主从的特点：
1、redis使用异步复制，从服务器会以每秒一次的频率向主服务器报告复制流的处理进度
2、一个主服务器可以有多个从服务器，从服务器也可以有自己的从服务器(级联复制)
3、复制功能不会阻塞主服务器，即使一个或多个从服务器正在进行初次同步，主服务器也可以继续处理命令请求
4、复制功能可以用于数据冗余，也可以通过让多个从服务器处理只读命令请求来提升扩展性
5、Redis从节点默认为只读，无须手动配置
redis的主从集群可以实现分担压力的效果，但是无法做到高可用，如果master宕掉，服务就不可用了，所以使用redis的sentinel可以实现HA的功能：
sentinel作用如下：
1、监控：sentinel会不断的检查你的主服务器和从服务器是否运行正常
2、当被监控的某个redis服务器出现问题时，sentinel可以通过API向管理员或者其他应用程序发送通知
3、自动故障转移：当一个主服务器不能正常工作时，sentinel会开始一次自动故障转移操作，他会将其中一个从服务器升级为新的主服务器，并将其他从服务器改为复制新的主服务器；当客户端试图连接失效的主服务器时，集群也会向客户端返回新主服务器的地址，使得集群可以使用新主服务器代替失效服务器。
redis sentinel在监控redis实例时有两种redis宕机状态S_DOWN和O_DOWN：
S_DOWN:当sentinel在指定的超时时间内没有收到一个正确的ping回复值，则认为是S_DOWN
O_DOWN:O_DOWN的条件是有足够多的sentinel认为该redis实例是S_DOWN。
注意：O_DOWN只能是发生在主服务器，sentinel和其他从服务器不会发生O_DOWN
二、开始安装配置主从高可用
1、环境架构：
Centos 6.6 x86_64 redis 3.0.7 master 10.0.18.145 redis port 6379 sentinel port 26379 slave1 10.0.18.146 redis port 6379 sentinel port 26479 slave2 10.0.18.147 redis port 6379 sentinel port 26579 注：redis编译安装配置以及主从配置这里就不在赘述了，请参考之前的redis安装配置日志： http://linuxg.blog.51cto.com/4410110/1862042
架构说明：
a、如果主节点修复后再上线，就会变成从节点。
b、客户端程序连接时，应该连接sentinel节点
2、在三台redis上配置sentinel
先介绍一下sentinel.conf配置文件中常用的参数，如下：
port 26379 #sentinel的端口 dir /tmp #工作目录 sentinel monitor mymaster 127.0.0.1 6379 2 #mymaster是自定义的名称，ip地址是master的ip，6379为master的redis-server端口 #2是quorum，表示sentinel确认一个Master为O_DOWN状态至少需要多少个哨兵同意（此值要小于等于集群中slave的个数） 英文翻译过来是：告诉Sentinel监视这个master，并且只有在至少sentinels同意的情况下才考虑它是O_DOWN（客观宕掉）状态。 sentinel down-after-milliseconds mymaster 30000 #mymaster多久不响应认为SDOWN，单位是毫秒 sentinel parallel-syncs mymaster 1 #指定最大同时同步新maser配置的slave数量，官方提示用较低的数字，一般为1 数字越小，故障转移过程完成所需的时间就越多，如果全部从服务器一起对新的主服务器进行同步，那么就可能会造成所有从服务器在短时间内全部不可用的情况出现。 sentinel failover-timeout mymaster 180000 #2次failover切换时间，如果第一次没有failover成功，过多长时间再次failover 注意：无论你设置要多少个Sentinel同意才能判断一个服务器失效，一个Sentinel都需要获得系统中多数（majority）Sentinel的支持，才能发起一次自动故障迁移， 并预留一个给定的配置纪元（configuration Epoch，一个配置纪元就是一个新主服务器配置的版本号）。换句话说，在只有少数（minority）Sentinel 进程正常运作的情况下， Sentinel 是不能执行自动故障迁移的！
sentinel配置文件如下：
18.145上： #cat /usr/local/redis/conf/sentinel.conf port 26379 sentinel monitor mymaster 10.0.18.145 6379 1 sentinel auth-pass mymaster abcd123 sentinel down-after-milliseconds mymaster 60000 #1分钟 sentinel failover-timeout mymaster 180000 #3分钟 sentinel parallel-syncs mymaster 1 logfile "/usr/local/redis/log/sentinel_master.log" #日志位置 注意：18.146和18.147上的sentinel配置和18.145一样，只有端口和log不一样如下： slave1 18.146 #cat sentinel.conf port 26479 logfile "/usr/local/redis/log/sentinel_slave1.log" slave2 18.147 #cat sentinel.conf prot 26579 logfile "/usr/local/redis/log/sentinel_slave2.log"
在master和2台slave服务器上启动redis-server和sentinel，确保可以正常启动！
#nohup /usr/local/redis/bin/redis-sentinel /usr/local/redis/conf/sentinel.conf & #我使用此方法 或者nohup /usr/local/redis/bin/redis-server /usr/local/redis/conf/sentinel.conf --sentinel & 查看sentinel进程 #ps aux | grep redis root 10370 0.1 0.1 137452 2152 ? Ssl 11:02 0:27 /usr/local/redis/bin/redis-server 10.0.18.145:6379 root 10474 0.6 0.1 137456 2084 ? Ssl 15:08 0:00 /usr/local/redis/bin/redis-sentinel *:26379 [sentinel] 请确保三台redis的redis-server和sentinel进程都可以正常启动！
注：Sentinel通过监听Master，知道了Master的存在，那么Sentinel可以读取Master关于Slave的信息，然后交由Sentinel进行管理！
3、查看sentinel日志
查看master上的sentinel日志：
#tail -f sentinel_master.log ……………… 13087:X 14 Oct 15:41:21.313 # Sentinel runid is e8b54004648ea00257cfee7150713e86537e3e69 13087:X 14 Oct 15:41:21.313 # +monitor master mymaster 10.0.18.145 6379 quorum 2 13087:X 14 Oct 15:41:21.314 * +slave slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 13087:X 14 Oct 15:41:21.317 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 13087:X 14 Oct 15:41:36.241 * +sentinel sentinel 10.0.18.146:26479 10.0.18.146 26479 @ mymaster 10.0.18.145 6379 13087:X 14 Oct 15:41:47.947 * +sentinel sentinel 10.0.18.147:26579 10.0.18.147 26579 @ mymaster 10.0.18.145 6379
查看slave1上的sentinel日志：
#tail -f sentinel_slave1.log ……………… 22427:X 14 Oct 15:41:34.145 # Sentinel runid is d0339d3013e855489ff368f6f28a865417ef9818 22427:X 14 Oct 15:41:34.146 # +monitor master mymaster 10.0.18.145 6379 quorum 2 22427:X 14 Oct 15:41:35.147 * +slave slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 22427:X 14 Oct 15:41:35.158 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 22427:X 14 Oct 15:41:35.574 * +sentinel sentinel 10.0.18.145:26379 10.0.18.145 26379 @ mymaster 10.0.18.145 6379 22427:X 14 Oct 15:41:47.947 * +sentinel sentinel 10.0.18.147:26579 10.0.18.147 26579 @ mymaster 10.0.18.145 6379
查看slave2上的sentinel日志：
#tail -f sentinel_slave2.log …………… 24207:X 14 Oct 15:41:45.920 # Sentinel runid is 4b63b7796970f93d12e41c648f3a2668864ca5db 24207:X 14 Oct 15:41:45.920 # +monitor master mymaster 10.0.18.145 6379 quorum 2 24207:X 14 Oct 15:41:45.922 * +slave slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 15:41:45.925 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 15:41:46.695 * +sentinel sentinel 10.0.18.146:26479 10.0.18.146 26479 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 15:41:47.830 * +sentinel sentinel 10.0.18.145:26379 10.0.18.145 26379 @ mymaster 10.0.18.145 6379
通过以上日志信息可以看出，redis主从复制已经OK，sentinel也已经启动OK！
4、查看主从复制信息和sentinel信息
在master上确认sentinel的信息
#./redis-cli -p 26379 127.0.0.1:26379> info sentinel # Sentinel sentinel_masters:1 sentinel_tilt:0 sentinel_running_scripts:0 sentinel_scripts_queue_length:0 master0:name=mymaster,status=ok,address=10.0.18.145:6379,slaves=2,sentinels=3 可以看到有2台slave和3台sentinel，状态是ok的 确认master的信息 127.0.0.1:26379> sentinel masters 1) 1) "name" 2) "mymaster" 3) "ip" 4) "10.0.18.145" 5) "port" 6) "6379" 7) "runid" 8) "5673ebe1bfd192d44f5c76df952528a38be28b43" #master的唯一标识id 9) "flags" 10) "master" 11) "pending-commands" 12) "0" 13) "last-ping-sent" 14) "0" 15) "last-ok-ping-reply" 16) "383" 17) "last-ping-reply" 18) "383" 19) "down-after-milliseconds" 20) "60000" 21) "info-refresh" 22) "9715" 23) "role-reported" 24) "master" 25) "role-reported-time" 26) "1164126" 27) "config-epoch" 28) "0" 29) "num-slaves" 30) "2" 31) "num-other-sentinels" 32) "2" 33) "quorum" 34) "2" 35) "failover-timeout" 36) "180000" 37) "parallel-syncs" 38) "1" 确认slave的信息，如下: 127.0.0.1:26379> sentinel slaves mymaster 1) 1) "name" 2) "10.0.18.147:6379" 3) "ip" 4) "10.0.18.147" 5) "port" 6) "6379" 7) "runid" 8) "d021efa3c5cb3c6ae695428ad7c6c371bec210dc" #slave1的唯一标识id 9) "flags" 10) "slave" 11) "pending-commands" 12) "0" 13) "last-ping-sent" 14) "0" 15) "last-ok-ping-reply" 16) "510" 17) "last-ping-reply" 18) "510" 19) "down-after-milliseconds" 20) "60000" 21) "info-refresh" 22) "7173" 23) "role-reported" 24) "slave" 25) "role-reported-time" 26) "1231725" 27) "master-link-down-time" 28) "0" 29) "master-link-status" 30) "ok" 31) "master-host" 32) "10.0.18.145" 33) "master-port" 34) "6379" 35) "slave-priority" 36) "100" 37) "slave-repl-offset" 38) "244198" 2) 1) "name" 2) "10.0.18.146:6379" 3) "ip" 4) "10.0.18.146" 5) "port" 6) "6379" 7) "runid" 8) "9608029269c840e8b019bf10ce1b242c56cb231d" #slave2的唯一标识id 9) "flags" 10) "slave" 11) "pending-commands" 12) "0" 13) "last-ping-sent" 14) "0" 15) "last-ok-ping-reply" 16) "503" 17) "last-ping-reply" 18) "503" 19) "down-after-milliseconds" 20) "60000" 21) "info-refresh" 22) "7173" 23) "role-reported" 24) "slave" 25) "role-reported-time" 26) "1231728" 27) "master-link-down-time" 28) "0" 29) "master-link-status" 30) "ok" 31) "master-host" 32) "10.0.18.145" 33) "master-port" 34) "6379" 35) "slave-priority" 36) "90" 37) "slave-repl-offset" 38) "244198"
5、进行容灾测试：
a、模拟redis的HA集群slave服务器宕机
停掉一台slave，观察集群的状态，这里将slave2的redis-server停掉
首先查看三台sentinel的日志信息，都会刷新一条，如下：
11339:X 13 Oct 10:55:51.391 # +sdown slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379
可以看到18.147down掉了！
到master服务器上查看主从复制信息:
10.0.18.145:6379> info replication # Replication role:master connected_slaves:1 slave0:ip=10.0.18.146,port=6379,state=online,offset=172908,lag=0 master_repl_offset:172908 repl_backlog_active:1 repl_backlog_size:1048576 repl_backlog_first_byte_offset:2 repl_backlog_histlen:172907 可以看到10.0.18.147已经被master剔除了!
再重新将slave2的redis-server启动起来，继续观察：
三台sentinel的日志信息，如下：
11339:X 13 Oct 10:59:59.040 * +reboot slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 11339:X 13 Oct 10:59:59.097 # -sdown slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 可以看出18.147已经重新启动了！ 在master上继续查看复制信息，如下： 10.0.18.145:6379> info replication # Replication role:master connected_slaves:2 slave0:ip=10.0.18.146,port=6379,state=online,offset=224670,lag=0 slave1:ip=10.0.18.147,port=6379,state=online,offset=224670,lag=0 master_repl_offset:224944 repl_backlog_active:1 repl_backlog_size:1048576 repl_backlog_first_byte_offset:2 repl_backlog_histlen:224943 可以看到10.0.18.147已经加入到集群中了
b、模拟redis的HA集群master服务器宕机
说明：停掉master的6379端口，假设master是因为外部问题宕机了（直接kill掉redis-server进程）
观察三台redis的sentinel日志：
#tail -f sentinel_master.log ……………… 13087:X 14 Oct 16:13:58.625 # +sdown master mymaster 10.0.18.145 6379 #说明18.145down掉了 13087:X 14 Oct 16:13:58.741 # +new-epoch 1 13087:X 14 Oct 16:13:58.766 # +vote-for-leader 4b63b7796970f93d12e41c648f3a2668864ca5db 1 #投票选举master，可以根据前面sentinel日志知道是18.147 13087:X 14 Oct 16:13:59.713 # +odown master mymaster 10.0.18.145 6379 #quorum 3/2 #投票，有2票确定18.145宕机 13087:X 14 Oct 16:13:59.713 # Next failover delay: I will not start a failover before Fri Oct 14 16:19:59 2016 #第一次failover失败，继续 13087:X 14 Oct 16:13:59.820 # +config-update-from sentinel 10.0.18.147:26579 10.0.18.147 26579 @ mymaster 10.0.18.145 6379 #从18.147同步新配置 13087:X 14 Oct 16:13:59.820 # +switch-master mymaster 10.0.18.145 6379 10.0.18.146 6379 #看来已经选举出了新master为18.146 13087:X 14 Oct 16:13:59.820 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.146 6379 #18.147 重新配置（sentinel修改配置来实现）master指向18.146 13087:X 14 Oct 16:13:59.820 * +slave slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 #18.145降级为slave，master指向18.146 13087:X 14 Oct 16:14:59.872 # +sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 #并且检测到18.145这台slave处于down状态 #tail -f sentinel_slave1.log ……………… 22427:X 14 Oct 16:13:58.741 # +new-epoch 1 22427:X 14 Oct 16:13:58.767 # +vote-for-leader 4b63b7796970f93d12e41c648f3a2668864ca5db 1 #投票选举master，选18.147 22427:X 14 Oct 16:13:58.768 # +sdown master mymaster 10.0.18.145 6379 22427:X 14 Oct 16:13:58.824 # +odown master mymaster 10.0.18.145 6379 #quorum 3/2 22427:X 14 Oct 16:13:58.824 # Next failover delay: I will not start a failover before Fri Oct 14 16:19:59 2016 #第一次failover失败，继续 22427:X 14 Oct 16:13:59.820 # +config-update-from sentinel 10.0.18.147:26579 10.0.18.147 26579 @ mymaster 10.0.18.145 6379 #从18.147同步新配置 22427:X 14 Oct 16:13:59.820 # +switch-master mymaster 10.0.18.145 6379 10.0.18.146 6379 #看来已经选举出了新master为18.146 22427:X 14 Oct 16:13:59.821 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.146 6379 22427:X 14 Oct 16:13:59.821 * +slave slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 22427:X 14 Oct 16:14:59.825 # +sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 #tail -f sentinel_slave2.log ……………… 24207:X 14 Oct 16:13:58.632 # +sdown master mymaster 10.0.18.145 6379 24207:X 14 Oct 16:13:58.698 # +odown master mymaster 10.0.18.145 6379 #quorum 2/2 24207:X 14 Oct 16:13:58.698 # +new-epoch 1 24207:X 14 Oct 16:13:58.698 # +try-failover master mymaster 10.0.18.145 6379 #尝试failover到18.145，但是18.145redis-server已经down掉 24207:X 14 Oct 16:13:58.701 # +vote-for-leader 4b63b7796970f93d12e41c648f3a2668864ca5db 1 #投票选举master 24207:X 14 Oct 16:13:58.767 # 10.0.18.145:26379 voted for 4b63b7796970f93d12e41c648f3a2668864ca5db 1 #145一票选18.147 24207:X 14 Oct 16:13:58.769 # 10.0.18.146:26479 voted for 4b63b7796970f93d12e41c648f3a2668864ca5db 1 #146一票选18.147 24207:X 14 Oct 16:13:58.867 # +elected-leader master mymaster 10.0.18.145 6379 #又尝试选举18.145 24207:X 14 Oct 16:13:58.868 # +failover-state-select-slave master mymaster 10.0.18.145 6379 #对mymaster进行故障转移 24207:X 14 Oct 16:13:58.920 # +selected-slave slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 #18.146当选为新的master（因为它的slave_priority比较小） 24207:X 14 Oct 16:13:58.921 * +failover-state-send-slaveof-noone slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 #Sentinel正在将指定的从服务器(10.146)升级为主服务器，等待升级功能完成。 24207:X 14 Oct 16:13:58.983 * +failover-state-wait-promotion slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 #等待升级为master 24207:X 14 Oct 16:13:59.750 # +promoted-slave slave 10.0.18.146:6379 10.0.18.146 6379 @ mymaster 10.0.18.145 6379 #18.146升级为master 24207:X 14 Oct 16:13:59.751 # +failover-state-reconf-slaves master mymaster 10.0.18.145 6379 #当前状态为重新加载18.145配置，将其降级为slave，需要在redis.conf中配置slaveof 24207:X 14 Oct 16:13:59.819 * +slave-reconf-sent slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 16:14:00.775 * +slave-reconf-inprog slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 16:14:00.775 * +slave-reconf-done slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.145 6379 24207:X 14 Oct 16:14:00.833 # +failover-end master mymaster 10.0.18.145 6379 #故障转移完成 24207:X 14 Oct 16:14:00.833 # +switch-master mymaster 10.0.18.145 6379 10.0.18.146 6379 #master变成了18.146 24207:X 14 Oct 16:14:00.834 * +slave slave 10.0.18.147:6379 10.0.18.147 6379 @ mymaster 10.0.18.146 6379 24207:X 14 Oct 16:14:00.835 * +slave slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 24207:X 14 Oct 16:15:00.845 # +sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 #而且18.145为slave，并且判断为down状态
到18.146查看主从集群状态信息：
10.0.18.146:6379> auth abcd123 OK 10.0.18.146:6379> info replication # Replication role:master connected_slaves:1 slave0:ip=10.0.18.147,port=6379,state=online,offset=1067564,lag=0 master_repl_offset:1067701 repl_backlog_active:1 repl_backlog_size:1048576 repl_backlog_first_byte_offset:19126 repl_backlog_histlen:1048576 可以看出此时的18.146已经是master了，并且slave服务器只有18.147！
查看sentinel信息：
#./bin/redis-cli -p 26479 127.0.0.1:26479> info sentinel # Sentinel sentinel_masters:1 sentinel_tilt:0 sentinel_running_scripts:0 sentinel_scripts_queue_length:0 master0:name=mymaster,status=ok,address=10.0.18.146:6379,slaves=2,sentinels=3 哨兵master信息： 127.0.0.1:26479> sentinel masters 1) 1) "name" 2) "mymaster" 3) "ip" 4) "10.0.18.146" 5) "port" 6) "6379" 7) "runid" 8) "9608029269c840e8b019bf10ce1b242c56cb231d" 9) "flags" 10) "master" 11) "pending-commands" 12) "0" 13) "last-ping-sent" 14) "0" 15) "last-ok-ping-reply" 16) "399" 17) "last-ping-reply" 18) "399" 19) "down-after-milliseconds" 20) "60000" 21) "info-refresh" 22) "490" 23) "role-reported" 24) "master" 25) "role-reported-time" 26) "5521890" 27) "config-epoch" 28) "1" 29) "num-slaves" 30) "2" 31) "num-other-sentinels" 32) "2" 33) "quorum" 34) "2" 35) "failover-timeout" 36) "180000" 37) "parallel-syncs" 38) "1"
假如此时10.0.18.145这台服务器的redis-server恢复了，也会被加入slave队列中,如下：
先查看18.145上的sentinel日志 #tail -f sentinel_master.log ………… 13087:X 14 Oct 17:53:12.701 # -sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 再查看18.146上的sentinel日志 #tail -f sentinel_slave1.log ………… 22427:X 14 Oct 17:53:12.648 # -sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 22427:X 14 Oct 17:53:22.608 * +convert-to-slave slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379 可以看到18.145的redis-server进程恢复之后，降级为slave，被重新加入到集群中。 再查看18.147上的sentinel日志 #tail -f sentinel_slave2.log ………… 24207:X 14 Oct 17:53:12.673 # -sdown slave 10.0.18.145:6379 10.0.18.145 6379 @ mymaster 10.0.18.146 6379
6、查看故障转移之后redis和sentinel配置文件的变化
a、首先查看三台redis的redis.conf文件
因为模拟18.145服务器的redis-server宕机而后又重新开启，所以sentinel机制rewrite了redis.conf文件，如下：
# Generated by CONFIG REWRITE slaveof 10.0.18.146 6379 rewrite机制在18.145的redis.conf末尾添加了如上2行，表示指向18.146这台新的master
查看18.146的redis.conf文件，你会发现原来的参数slaveof 10.0.18.145 6379 已经消失了！
查看18.147的redis.conf文件，如下：
slaveof 10.0.18.146 6379 由原来的指向10.0.18.145变成了指向新的master10.0.18.146
b、查看三台redis的sentinel.conf文件
10.145上的sentinel.conf文件： #cat sentinel.conf port 26379 sentinel monitor mymaster 10.0.18.146 6379 2 #已经由原来的18.145变成了18.146 sentinel down-after-milliseconds mymaster 60000 sentinel auth-pass mymaster abcd123 sentinel config-epoch mymaster 1 sentinel leader-epoch mymaster 1 logfile "/usr/local/redis/log/sentinel_master.log" # Generated by CONFIG REWRITE dir "/usr/local/redis" sentinel known-slave mymaster 10.0.18.147 6379 sentinel known-slave mymaster 10.0.18.145 6379 sentinel known-sentinel mymaster 10.0.18.147 26579 4b63b7796970f93d12e41c648f3a2668864ca5db #后边的字符串是sentinel启动时候为每一台redis生成的唯一标识 sentinel known-sentinel mymaster 10.0.18.146 26479 d0339d3013e855489ff368f6f28a865417ef9818 sentinel current-epoch 1 10.146上的sentinel.conf #cat sentinel.conf port 26479 sentinel monitor mymaster 10.0.18.146 6379 2 sentinel down-after-milliseconds mymaster 60000 sentinel auth-pass mymaster abcd123 sentinel config-epoch mymaster 1 sentinel leader-epoch mymaster 1 logfile "/usr/local/redis/log/sentinel_slave1.log" # Generated by CONFIG REWRITE dir "/usr/local/redis/conf" sentinel known-slave mymaster 10.0.18.147 6379 sentinel known-slave mymaster 10.0.18.145 6379 sentinel known-sentinel mymaster 10.0.18.147 26579 4b63b7796970f93d12e41c648f3a2668864ca5db sentinel known-sentinel mymaster 10.0.18.145 26379 e8b54004648ea00257cfee7150713e86537e3e69 sentinel current-epoch 1 10.147上的sentinel.conf #cat sentinel.conf port 26579 sentinel monitor mymaster 10.0.18.146 6379 2 sentinel down-after-milliseconds mymaster 60000 sentinel auth-pass mymaster abcd123 sentinel config-epoch mymaster 1 sentinel leader-epoch mymaster 1 logfile "/usr/local/redis/log/sentinel_slave2.log" # Generated by CONFIG REWRITE dir "/usr/local/redis" sentinel known-slave mymaster 10.0.18.147 6379 sentinel known-slave mymaster 10.0.18.145 6379 sentinel known-sentinel mymaster 10.0.18.146 26479 d0339d3013e855489ff368f6f28a865417ef9818 sentinel known-sentinel mymaster 10.0.18.145 26379 e8b54004648ea00257cfee7150713e86537e3e69 sentinel current-epoch 1
7、sentinel日志中的一些参数说明
+reset-master ：主服务器已被重置。 +slave ：一个新的从服务器已经被 Sentinel 识别并关联。 +failover-state-reconf-slaves ：故障转移状态切换到了 reconf-slaves 状态。 +failover-detected ：另一个 Sentinel 开始了一次故障转移操作，或者一个从服务器转换成了主服务器。 +slave-reconf-sent ：领头（leader）的 Sentinel 向实例发送了 [SLAVEOF](/commands/slaveof.html) 命令，为实例设置新的主服务器。 +slave-reconf-inprog ：实例正在将自己设置为指定主服务器的从服务器，但相应的同步过程仍未完成。 +slave-reconf-done ：从服务器已经成功完成对新主服务器的同步。 -dup-sentinel ：对给定主服务器进行监视的一个或多个 Sentinel 已经因为重复出现而被移除 —— 当 Sentinel 实例重启的时候，就会出现这种情况。 +sentinel ：一个监视给定主服务器的新 Sentinel 已经被识别并添加。 +sdown ：给定的实例现在处于主观下线状态。 -sdown ：给定的实例已经不再处于主观下线状态。 +odown ：给定的实例现在处于客观下线状态。 -odown ：给定的实例已经不再处于客观下线状态。 +new-epoch ：当前的纪元（epoch）已经被更新。 +try-failover ：一个新的故障迁移操作正在执行中，等待被大多数 Sentinel 选中（waiting to be elected by the majority）。 +elected-leader ：赢得指定纪元的选举，可以进行故障迁移操作了。 +failover-state-select-slave ：故障转移操作现在处于 select-slave 状态 —— Sentinel 正在寻找可以升级为主服务器的从服务器。 no-good-slave ：Sentinel 操作未能找到适合进行升级的从服务器。Sentinel 会在一段时间之后再次尝试寻找合适的从服务器来进行升级，又或者直接放弃执行故障转移操作。 selected-slave ：Sentinel 顺利找到适合进行升级的从服务器。 failover-state-send-slaveof-noone ：Sentinel 正在将指定的从服务器升级为主服务器，等待升级功能完成。 failover-end-for-timeout ：故障转移因为超时而中止，不过最终所有从服务器都会开始复制新的主服务器（slaves will eventually be configured to replicate with the new master anyway）。 failover-end ：故障转移操作顺利完成。所有从服务器都开始复制新的主服务器了。 +switch-master ：配置变更，主服务器的 IP 和地址已经改变。 这是绝大多数外部用户都关心的信息。 +tilt ：进入 tilt 模式。 -tilt ：退出 tilt 模式。
注：在http://linuxg.blog.51cto.com/4410110/1862042这篇博客中我是从redis源码中复制的redis.conf文件而不是手动创建的，是因为我配置sentinel高可用（暨redis应用之使用sentinel实现主从复制高可用）的过程中遇到一个坑，使用手动自创建的redis.conf，当停掉master的redis-server进程的时候，sentinel无法通过选举实现failover，日志中一直是failover 超时，百思不得其解，也在google寻找解决方案无果，后来改为复制源码中的redis.conf，然后failover就OK了！
8、Sentinel的客户端
如果要做到应用程序（客户端）对Redis的failover透明Transparent)，客户端需要监控sentinel的频道信息，并自动连接新的主节点。官方提供了一个专门的topic来讲解这个问题：Guidelines for Redis clients with support for Redis Sentinel而一些常用的开发语言也已经有了整合sentinel的redis driver，如下：
Node.JS redis-sentinel-client — Transparent Redis Sentinel client
Python redis 2.10.3
Java Jedis
以Python为例，首先安装redis-py
#pip install redis
一个简单的测试代码如下，首先获得一个Sentinel对象，然后
#vim sentinel.py
from redis.sentinel import Sentinel
sentinel = Sentinel([('localhost', 26379)], socket_timeout=0.1)
master = sentinel.master_for('myredis', socket_timeout=0.1)
master.set('foo', 'bar')
slave = sentinel.slave_for('myredis', socket_timeout=0.1)
slave.get('foo')
执行后成功得到bar这个值
python sentinel.py bar
上面的master和slave都是标准的建立好连接的StrictRedis实例，slave则是sentinel查询到的第一个可用的slave。如果正在连接的master不可用时，客户端会先抛出redis.exceptions.ConnectionError异常（此时还没开始failover），然后抛出redis.sentinel.MasterNotFoundError异常（failover进行中），在sentinel正常failover之后，实例正常。所以要开发一个sentinel的高可用客户端，可以参考上面那篇官方的指导。
参考链接：
http://debugo.com/redis-sentinel/
http://www.fblinux.com/?p=157
不足之处，请多多指出！