docker与docker-compose搭建redis1主2从3哨兵

docker安装redis

docker pull redis:latest

创建目录结构

用于挂载数据卷配置文件等

运行redis容器

主redis配置

下面这种方式挂载的配置文件不生效。

 docker run -d \
 --name master_redis_6379 \
  -p 6379:6379 \
   --restart unless-stopped \
   -v /mydata/master_redis/data:/data \
   -v /mydata/master_redis/conf/redis.conf:/etc/redis/redis.conf  \
   redis:latest 

即使我做了目录映射，docker容器中默认使用的redis.conf不是我映射的文件，需要指定配置文件才能生效，即在最后加上redis-server /etc/redis/redis.conf

 docker run -d \
 --name master_redis_6379 \
  -p 6379:6379 \
   --restart unless-stopped \
   -v /mydata/master_redis/data:/data \
   -v /mydata/master_redis/conf/redis.conf:/etc/redis/redis.conf  \
   redis:latest \
   redis-server /etc/redis/redis.conf

-v /mydata/redis/redis.conf:/etc/redis/redis.conf
将主机上的/mydata/redis/redis.conf路径映射到容器内的/etc/redis/redis.conf路径
-v /mydata/redis/data:/data
将主机上的/mydata/redis/data路径映射到容器内的/data路径。
--name master_redis-6379
给这个Docker容器起名为master_redis-6379。

master的redis.conf

bind 0.0.0.0
protected-mode no
port 6379
tcp-backlog 511
timeout 0
tcp-keepalive 300
supervised no
loglevel notice
#日志文件路径
#logfile "/mydata/master_redis/log/6379.log"
databases 16
always-show-logo yes
save ""
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump6379.rdb
dir ./
masterauth "admin"
slave-serve-stale-data yes
slave-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-disable-tcp-nodelay no
slave-priority 100
#slaveof ip1 6379
#slave-announce-ip ip1
#slave-announce-port 6379

#配置密码
requirepass "admin"

lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
slave-lazy-flush no
#开启aof
appendonly yes
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite yes
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble no
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
aof-rewrite-incremental-fsync yes

这是一段Redis服务器的配置文件内容。下面是对这段配置的简单解析：

bind 0.0.0.0: 这意味着Redis将接受来自任何IP地址的连接。
protected-mode no: 这表示Redis将只在非安全模式下运行，也就是说，任何能够连接到Redis的客户端都可以执行命令。
port 6379: 这是Redis服务器监听的端口，通常Redis使用的是6379端口。
tcp-backlog 511: 这是TCP连接的排队长度。
timeout 0: 这表示Redis服务器等待客户端响应的时间，如果超过这个时间，服务器将关闭连接。设置为0表示没有超时限制。
tcp-keepalive 300: 这表示在客户端断开连接后，服务器将等待300秒再关闭TCP连接。
supervised no: 这表示Redis服务器的运行状态是否受操作系统监督。
loglevel notice: 这是Redis服务器日志的级别，这里设置为"notice"，表示只记录重要的事件信息。
databases 16: 这表示Redis服务器默认创建16个数据库。
always-show-logo yes: 这个选项可能是在Redis启动时显示一些版权信息或版本信息。
save "": 这表示不进行任何数据持久化操作。
stop-writes-on-bgsave-error yes: 如果在后台保存（bgsave）数据时出现错误，是否停止写操作。
rdbcompression yes: 是否使用压缩算法来保存RDB文件。
rdbchecksum yes: 是否对RDB文件进行校验。
dbfilename dump.rdb: Redis保存数据的默认文件名是dump.rdb。
dir ./: 这表示Redis服务器将在当前目录下存储数据。
masterauth "admin": 这是Redis主服务器在进行复制操作时需要认证的密码。
slave-serve-stale-data yes: 从服务器是否提供旧数据，即使该数据可能已经过时。
slave-read-only yes: 从服务器是否只读。
repl-diskless-sync no: 是否使用磁盘来进行同步。
repl-diskless-sync-delay 5: 在使用磁盘同步数据时，是否延迟5秒再开始同步。
repl-disable-tcp-nodelay no: 是否禁用TCP_NODELAY选项。
slave-priority 100: 从服务器的优先级，默认值为100。
requirepass "admin": 客户端连接Redis时需要提供的密码。
lazyfree-lazy-eviction no: 是否立即释放被缓存的数据，而不是等待其自然释放。
lazyfree-lazy-expire no: 是否立即过期而不是等待其自然过期。
lazyfree-lazy-server-del no: 是否立即删除被缓存的数据而不是等待其自然删除。
slave-lazy-flush no: 从服务器是否立即刷新数据而不是等待其自然刷新。
appendonly yes: 是否开启AOF持久化功能。
appendfilename "appendonly.aof": AOF持久化文件的名称。
appendfsync everysec: AOF持久化文件同步的频率。
no-appendfsync-on-rewrite no: 在AOF重写期间是否同步数据到磁盘。
auto-aof-rewrite-percentage 100: 当AOF文件大小与最后一次重写后的差值超过这个百分比时，触发自动AOF重写。
auto-aof-rewrite-min-size 64mb: AOF重写的最小大小为64MB。
aof-load-truncated yes: 当AOF文件出现截断错误时，是否继续加载数据。
aof-use-rdb-preamble no: 是否在AOF文件的开头写入RDB格式的数据。
lua-time-limit 5000: Lua脚本执行的最大时间限制，单位为毫秒。
slowlog-log-slower-than 10000: 如果某个命令的执行时间超过这个值，将会被记录到慢日志中。
slowlog-max-len 128: 慢日志的最大长度，超过这个长度后将会覆盖最早的慢日志记录。
latency-monitor-threshold 0: 这个选项表示在哪个延迟阈值下触发警报，设置为0表示不触发警报。
notify-keyspace-events "": 这个选项表示当某个事件发生时触发哪些回调函数
hash-max-ziplist-entries 512: 对于Redis的哈希数据类型，如果一个哈希表中有超过512个不同的键值对，Redis会使用一种叫做"ziplist"的压缩列表来存储这个哈希表。这个选项可以增加或减少这个阈值。
hash-max-ziplist-value 64: 对于哈希表中的值，如果单个值的长度超过64字节，Redis会使用ziplist来存储这个哈希表。这个选项可以增加或减少这个阈值。
list-max-ziplist-size -2: 对于Redis的列表数据类型，如果一个列表的元素数量在-2000到2000之间，并且所有元素的长度都在64字节之内，Redis会使用ziplist来存储这个列表。
list-compress-depth 0: 这个选项决定了在列表中删除或插入元素时，Redis将尝试压缩列表的深度。设置为0表示不进行压缩。
set-max-intset-entries 512: 如果一个集合的所有元素都可以用32位整数表示，Redis会使用一种叫做"intset"的数据结构来存储这个集合。这个选项可以增加或减少这个阈值。
zset-max-ziplist-entries 128: 对于Redis的有序集合，如果一个成员在集合中出现的次数超过128次，Redis会使用ziplist来存储这个有序集合。
zset-max-ziplist-value 64: 对于有序集合中的成员的值，如果单个值的长度超过64字节，Redis会使用ziplist来存储这个有序集合。
hll-sparse-max-bytes 3000: HyperLogLog是一种用于估算元素数量的数据结构，这个选项定义了在使用稀疏表示法时，HyperLogLog的最大字节数。
activerehashing yes: 这个选项启用了"活跃的重新哈希"机制，它可以在后台进行哈希表的重新哈希，以优化哈希表的查询性能。
client-output-buffer-limit normal 0 0 0: 这个选项定义了正常客户端的输出缓冲限制。所有的限制都被设置为0，表示没有限制。
client-output-buffer-limit slave 256mb 64mb 60: 这个选项定义了从服务器的输出缓冲限制。从服务器最多可以使用256MB的输出缓冲区，如果超过64MB，从服务器将在60秒内关闭连接。
client-output-buffer-limit pubsub 32mb 8mb 60: 这个选项定义了发布/订阅客户端的输出缓冲限制。发布/订阅客户端最多可以使用32MB的输出缓冲区，如果超过8MB，发布/订阅客户端将在60秒内关闭连接。
hz 10: 这个选项定义了Redis服务器每秒执行的轮询(poll)操作的次数。轮询操作的次数越高，Redis的性能就越好，但是操作系统可能会因为频繁的上下文切换而受到影响。
aof-rewrite-incremental-fsync yes: 这个选项定义了在AOF持久化过程中是否进行增量式同步。设置为yes表示进行增量式同步。

主redis配置文件中，主要参数如下

bind 0.0.0.0: 这意味着Redis将接受来自任何IP地址的连接。

protected-mode no: 这表示Redis将只在非安全模式下运行，也就是说，任何能够连接到Redis的客户端都可以执行命令。

port 6379: 这是Redis服务器监听的端口，通常Redis使用的是6379端口。

requirepass "admin": 客户端连接Redis时需要提供的密码。

进入容器并进入redis命令行

 docker exec -it master_redis_6379 redis-cli

如果出现下面的问题，是需要登录

NOAUTH Authentication required.

解决方法

auth 密码

查看对应redis容器日志

docker logs master_redis_6379 

从redis配置

 docker run -d \
 --name slave_redis_6378 \
  -p 6378:6379 \
   --restart unless-stopped \
   -v /mydata/slave_redis/data:/data \
   -v /mydata/slave_redis/conf/redis.conf:/etc/redis/redis.conf  \
   redis:latest \
   redis-server /etc/redis/redis.conf

从redis主要配置文件

bind 0.0.0.0
protected-mode no
port 6379
tcp-backlog 511
timeout 0
tcp-keepalive 300
supervised no
loglevel notice
databases 16
always-show-logo yes
save ""
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir ./
#replicaof 47.120.0.38 6379
masterauth "admin"
slave-serve-stale-data yes
slave-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-disable-tcp-nodelay no
slave-priority 100
requirepass "admin"
lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
slave-lazy-flush no
appendonly yes
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite yes
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble no
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
aof-rewrite-incremental-fsync yes

#slave-announce-ip ip2
#slave-announce-port 6379
slaveof 47.120.0.38 6379

主要参数

bind 0.0.0.0
protected-mode no
port 6379
slaveof 47.120.0.38 6379  //设置主redis的地址以及端口号
masterauth "admin"     //用于登录到主redis的密码

查看主从节点的复制状态

xxxx.xxx:6379> info replication

docker 搭建redis主从

version: '3.1'
services:
  master:
    image: redis:latest
    container_name: master_redis_6379
    restart: always
    ports:
      - 6379:6379
    command: redis-server /etc/redis/redis.conf
    volumes:
      - ./master_redis/data:/data
      - ./master_redis/conf/redis.conf:/etc/redis/redis.conf

  slave1:
    image: redis:latest
    container_name: slave_redis_6377
    restart: always
    ports:
      - 6377:6377
    command: redis-server /etc/redis/redis.conf
    volumes:
      - ./slave_redis/data_6377:/data
      - ./slave_redis/conf_6377/redis.conf:/etc/redis/redis.conf

  slave2:
    image: redis:latest
    container_name: slave_redis_6378
    ports:
      - 6378:6378
    command: redis-server /etc/redis/redis.conf
    volumes:
      - ./slave_redis/data_6378:/data
      - ./slave_redis/conf_6378/redis.conf:/etc/redis/redis.conf

搭建哨兵集群

确保自己安装了docker-compose
安装教程

https://editor.csdn.net/md/?articleId=131579797

新建如图所示目录

sentinel.conf内容

#  bind 0.0.0.0
# 禁止保护模式
protected-mode no

port 26379

就是下面这条命令，浪费了我3个小时，
# daemonize yes

 dir /tmp

#  tcp-backlog 511

  masterauth "admin"
#  requirepass admin

# 配置监听的主服务器，这里sentinel monitor代表监控，mymaster代表服务器的名称，可以自定义，192.168.118.202代表监控的主服务器，6379代表端口，2代表只有两个或两个以上的哨兵认为主服务器不可用的时候，才会进行failover操作。
sentinel monitor mymaster 47.120.0.38 6379 2
# sentinel author-pass定义服务的密码，mymaster是服务名称，123456是Redis服务器密码
# sentinel auth-pass  
sentinel auth-pass mymaster admin

# 指定多少毫秒之后 主节点没有应答哨兵sentinel 此时 哨兵主观上认为主节点下线 默认30秒
sentinel down-after-milliseconds mymaster 5000
# 指定了在发生failover主备切换时最多可以有多少个slave同时对新的master进行同步,这个数字越小，完成failover所需的时间就越长
 sentinel parallel-syncs mymaster 1
# 故障转移的超时时间
sentinel failover-timeout mymaster 5000

编写docker-compose.yml文件

version: "3.0"
services:
  #sentinel1
  sentinel_redis_1:
    image: redis:latest
    restart: always
    container_name: sentinel_redis_1
    ports:
      - 26379:26379
    environment:
      - TZ=Asia/Shanghai
    #执行的命令
    command: redis-sentinel  /etc/redis/sentinel.conf
    volumes:
      - ./conf/sentinel.conf:/etc/redis/sentinel.conf
      - ./data/sentinel_redis_1:/data
  #sentinel2
  sentinel_redis_2:
    image: redis:latest
    restart: always
    container_name: sentinel_redis_2
    ports:
      - 26380:26379
    environment:
      - TZ=Asia/Shanghai
    #执行的命令
    command: redis-sentinel  /etc/redis/sentinel.conf
    volumes:
      - ./conf/sentinel.conf:/etc/redis/sentinel.conf
      - ./data/sentinel_redis_2:/data
  #sentinel3
  sentinel_redis_3:
    image: redis:latest
    restart: always
    container_name: sentinel_redis_3
    ports:
      - 26381:26379
    environment:
      - TZ=Asia/Shanghai
    command: redis-sentinel  /etc/redis/sentinel.conf
    volumes:
      - ./conf/sentinel.conf:/etc/redis/sentinel.conf
      - ./data/sentinel_redis_3:/data
networks:
  default:
    external: true
    name: redis_default

在存在该yml的文件下执行

docker-compose up -d

启动成功后可以产看容器日志

docker logs 容器名

遇到的问题

1.docker-compose编排的容器一直在显示重启
打印日志也为空

原因

当daemonize 设置了yes，表示redis在后台运行，当执行docker-compose执行启动redis进程时，docker发现自己无事可做，容器自动结束，所以导致redis启动失败。

解决方法

注释掉

遇到问题

2.哨兵节点监听不到master,即使master下线后，哨兵也不起作用

原因

redis在设置端口是一定要修改容器内的端口，不要都是6379,防止哨兵监听不到。