redis单节点,主从,主从加哨兵搭建

一、redis单实例搭建

注:系统安装后执行了系统初始化优化脚本,故用户、内核参数以及依赖包均修改已安装。

#redis版本以及系统版本

Redis version=4.0.6

[root@KDXF-00 setup]# cat /etc/redhat-release
CentOS Linux release 7.4.1708 (Core)

#把redis包放在指定目录下并解压

[root@KDXF-00 setup]# pwd
/data1/setup
[root@KDXF-00 setup]# ls
redis-4.0.6 redis-4.0.6.tar.gz

#创建目录并复制配置文件

[root@KDXF-00 opt]# mkdir -p redis/log
[root@KDXF-00 opt]# mkdir redis/etc
[root@KDXF-00 opt]#cp /data1/setup/redis-4.0.6/redis.conf /data1/opt/redis/etc

#安装

[root@KDXF-00 redis-4.0.6]# pwd

/data1/setup/redis-4.0.6

[root@KDXF-00 redis-4.0.6]# less README.md   //查看redis的基本信息及相关操作

[root@KDXF-00 redis-4.0.6]# make MALLOC=jemalloc

[root@KDXF-00 redis-4.0.6]# make PREFIX=/data1/opt/redis install

[root@KDXF-00 redis-4.0.6]# cd ~

[root@KDXF-00 ~]# tree /data1/opt/redis

/data1/opt/redis

├── bin

│   ├── redis-benchmark

│   ├── redis-check-aof

│   ├── redis-check-rdb

│   ├── redis-cli

│   ├── redis-sentinel -> redis-server

│   └── redis-server

├── etc

│   └── redis.conf

└── log

#配置环境变量

[root@KDXF-00 ~]# echo "export PATH=/data1/opt/redis/bin:$PATH">>/etc/profile

[root@KDXF-00 ~]# source /etc/profile

[root@KDXF-00 ~]# which redis-server

/data1/opt/redis/bin/redis-server

#启动

[root@KDXF-00 ~]# redis-server /data1/opt/redis/etc/redis.conf

注:此处会有报错

 

此时按ctrl+c退出即可,因为此时不是后台执行的命令

修复一:

[root@KDXF-00 ~]# echo "net.core.somaxconn=511">> /etc/sysctl.conf

[root@KDXF-00 ~]# sysctl -p

补充:

net.core.somaxconn是linux中的一个kernel参数,表示socket监听(listen)的backlog上限。backlog是socket的监听队列,当一个请求(request)尚未被处理或建立时,他会进入backlog。而socket server可以一次性处理backlog中的所有请求,处理后的请求不再位于监听队列中。当server处理请求较慢,以至于监听队列被填满后,新来的请求会被拒绝。所以说net.core.somaxconn限制了接收新 TCP 连接侦听队列的大小。对于一个经常处理新连接的高负载 web服务环境来说,默认的 128 太小,大多数环境这个值建议增加到 1024 或者更多。

修复二:

[root@KDXF-00 ~]# echo "vm.overcommit_memory = 1">> /etc/sysctl.conf

[root@KDXF-00 ~]# sysctl -p

补充:

overcommit_memory:设置内存分配策略。可选值:0、1、2。

0:表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应用进程。

1:表示内核允许分配所有的物理内存,而不管当前的内存状态如何。

2:表示内核允许分配超过所有物理内存和交换空间总和的内存

注意:redis在dump数据的时候,会fork出一个子进程,理论上child进程所占用的内存和parent是一样的,比如parent占用的内存为8G,这个时候也要同样分配8G的内存给child,如果内存无法负担,往往会造成redis服务器的down机或者IO负载过高,效率下降。所以这里比较优化的内存分配策略应该设置为 1(表示内核允许分配所有的物理内存,而不管当前的内存状态如何)。

修复三:

[root@KDXF-00 ~]# echo never > /sys/kernel/mm/transparent_hugepage/enabled

[root@KDXF-00 ~]# cat /sys/kernel/mm/transparent_hugepage/enabled

always madvise [never]

[root@KDXF-00 ~]# vim /etc/rc.local

插入:never > /sys/kernel/mm/transparent_hugepage/enabled

补充:使用透明大页,可能导致redis延迟和内存使用问题。

再次启动成功:

redis单节点,主从,主从加哨兵搭建_第1张图片

 

#查看进程

[root@KDXF-00 ~]# lsof -i:6379

COMMAND    PID USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

redis-ser 7586 root    6u  IPv4  25719      0t0  TCP localhost:6379 (LISTEN)

#指定用户并启动服务(前提是root启动的redis已进程关闭)

[root@KDXF-00 opt]# redis-cli shutdown

[root@KDXF-00 opt]# pwd

/data1/opt

[root@KDXF-00 opt]# chown -R iflyer:iflyer redis/

[root@KDXF-00 opt]# ll

total 0

drwxr-xr-x. 5 iflyer iflyer 39 Sep 30 01:42 redis

[root@KDXF-00 redis]# su iflyer

[iflyer@KDXF-00 redis]$ redis-server /data1/opt/redis/etc/redis.conf

#修改配置文件
设置redis后台启动

daemonize yes

指定PID文件

pidfile /data1/opt/redis/redis.pid

指定redis运行的端口

port 6379

设置日志级别以及日志文件

loglevel notice

logfile /data1/opt/redis/log/redis.log

 

二、redis主从搭建

注:安装过程见单实例章节

主服务器:192.168.213.23

从服务器:192.168.213.24

master操作:

#配置文件修改

设置可以连接的网段

bind 0.0.0.0

设置redis后台启动

daemonize yes

指定PID文件

pidfile /data1/opt/redis/redis.pid

指定redis运行的端口

port 6379

设置日志级别以及日志文件

loglevel notice

logfile /data1/opt/redis/log/redis.log

 

slave操作:

#配置文件修改

设置可以连接的网段

bind 0.0.0.0

设置redis后台启动

daemonize yes

指定master

slaveof 192.168.213.23 6379

指定PID文件

pidfile /data1/opt/redis/redis.pid

指定redis运行的端口

port 6379

设置日志级别以及日志文件

loglevel notice

logfile /data1/opt/redis/log/redis.log

 

#分别启动主从服务器查看日志文件:

[iflyer@KDXF-00 redis]$ redis-server /data1/opt/redis/etc/redis.conf

redis单节点,主从,主从加哨兵搭建_第2张图片

redis单节点,主从,主从加哨兵搭建_第3张图片

 

 

测试主从同步:

Master:

[root@KDXF-00 redis]# redis-cli -p 6379

127.0.0.1:6379>  keys *

(empty list or set)

127.0.0.1:6379> set name lily

OK

127.0.0.1:6379> get name

"lily"

127.0.0.1:6379>  keys *

1) "name"

Slave:

[root@KDXF-01 redis]# redis-cli -p 6379

127.0.0.1:6379> keys *

1) "name"

127.0.0.1:6379> get name

"lily"

 

三、一主一从三哨兵

注:安装过程见上文,此段主要配置sentinel(哨兵)

master操作:

#创建目录:

[iflyer@KDXF-00 redis]$ pwd

/data1/opt/redis

[iflyer@KDXF-00 redis]$ cp /data1/setup/redis-4.0.6/sentinel.conf /data1/opt/redis/etc/

[iflyer@KDXF-00 redis]$ mkdir sentinel_work

[iflyer@KDXF-00 redis]$ mkdir redisdata

#修改redis.conf配置文件:

daemonize yes

pidfile "/data1/opt/redis/redis.pid"

port 6379

tcp-backlog 511

timeout 0

tcp-keepalive 60

loglevel notice

logfile /data1/opt/redis/log/redis.log

databases 16

stop-writes-on-bgsave-error no

rdbcompression yes

rdbchecksum no

dbfilename "dump.rdb"

dir /data1/opt/redis/redisdata

masterauth test123

slave-serve-stale-data yes

slave-read-only yes

repl-diskless-sync no

repl-diskless-sync-delay 5

repl-disable-tcp-nodelay no

repl-backlog-size 512mb

slave-priority 100

requirepass test123

maxmemory 64gb

maxmemory-policy volatile-lru

appendonly yes

appendfilename "appendonly.aof"

appendfsync everysec

no-appendfsync-on-rewrite yes

auto-aof-rewrite-percentage 100

auto-aof-rewrite-min-size 64mb

aof-load-truncated yes

lua-time-limit 5000

slowlog-log-slower-than 10000

slowlog-max-len 128

latency-monitor-threshold 0

notify-keyspace-events ""

hash-max-ziplist-entries 512

hash-max-ziplist-value 64

list-max-ziplist-entries 512

list-max-ziplist-value 64

set-max-intset-entries 512

zset-max-ziplist-entries 128

zset-max-ziplist-value 64

hll-sparse-max-bytes 3000

activerehashing yes

client-output-buffer-limit normal 0 0 0

client-output-buffer-limit slave 5gb 5gb 600

client-output-buffer-limit pubsub 32mb 8mb 60

hz 10

aof-rewrite-incremental-fsync yes

#修改sentinel.conf配置文件:

port 26379

daemonize yes

logfile /data1/opt/redis/log/sentinel.log

dir /data1/opt/redis/sentinel_work

protected-mode no

sentinel monitor mymaster 192.168.213.23 6379 1

sentinel auth-pass mymaster test123

sentinel down-after-milliseconds mymaster 3000

sentinel failover-timeout mymaster 10000

sentinel config-epoch mymaster 7

sentinel leader-epoch mymaster 7

sentinel current-epoch 7

slave操作:

#创建目录:

[iflyer@KDXF-00 redis]$ pwd

/data1/opt/redis

[iflyer@KDXF-00 redis]$ cp /data1/setup/redis-4.0.6/sentinel.conf /data1/opt/redis/etc/

[iflyer@KDXF-00 redis]$ mkdir sentinel_work

[iflyer@KDXF-00 redis]$ mkdir redisdata

#修改redis.conf配置文件:

daemonize yes

pidfile "/data1/opt/redis/redis.pid"

port 6379

tcp-backlog 511

timeout 0

tcp-keepalive 60

loglevel notice

logfile /data1/opt/redis/log/redis.log

databases 16

stop-writes-on-bgsave-error no

rdbcompression yes

rdbchecksum no

dbfilename "dump.rdb"

dir /data1/opt/redis/redisdata

masterauth test123

slave-serve-stale-data yes

slave-read-only yes

repl-diskless-sync no

repl-diskless-sync-delay 5

repl-disable-tcp-nodelay no

repl-backlog-size 512mb

slave-priority 100

requirepass test123

maxmemory 64gb

maxmemory-policy volatile-lru

appendonly yes

appendfilename "appendonly.aof"

appendfsync everysec

no-appendfsync-on-rewrite yes

auto-aof-rewrite-percentage 100

auto-aof-rewrite-min-size 64mb

aof-load-truncated yes

lua-time-limit 5000

slowlog-log-slower-than 10000

slowlog-max-len 128

latency-monitor-threshold 0

notify-keyspace-events ""

hash-max-ziplist-entries 512

hash-max-ziplist-value 64

list-max-ziplist-entries 512

list-max-ziplist-value 64

set-max-intset-entries 512

zset-max-ziplist-entries 128

zset-max-ziplist-value 64

hll-sparse-max-bytes 3000

activerehashing yes

client-output-buffer-limit normal 0 0 0

client-output-buffer-limit slave 5gb 5gb 600

client-output-buffer-limit pubsub 32mb 8mb 60

hz 10

aof-rewrite-incremental-fsync yes

slaveof 192.168.213.23 6379

#修改sentinel.conf配置文件:

port 26379

daemonize yes

logfile /data1/opt/redis/log/sentinel.log

dir /data1/opt/redis/sentinel_work

protected-mode no

sentinel monitor mymaster 192.168.213.23 6379 1

sentinel auth-pass mymaster test123

sentinel down-after-milliseconds mymaster 3000

sentinel parallel-syncs mymaster 1

sentinel failover-timeout mymaster 10000

sentinel config-epoch mymaster 7

sentinel leader-epoch mymaster 5

sentinel current-epoch 7

#另搭建一个redis:192.168.213.25,sentinel.conf配置文件如下:

port 26379

daemonize yes

logfile /data1/opt/redis/log/sentinel.log

dir /data1/opt/redis/sentinel_work

protected-mode no

sentinel monitor mymaster 192.168.213.23 6379 1

sentinel auth-pass mymaster test123

sentinel down-after-milliseconds mymaster 3000

sentinel failover-timeout mymaster 10000

sentinel config-epoch mymaster 7

sentinel leader-epoch mymaster 7

sentinel current-epoch 7

 

#启动主从redis以及3个哨兵:

[iflyer@KDXF-00 bin]$ redis-server /data1/opt/redis/etc/redis.conf

[iflyer@KDXF-00 bin]$ pwd

/data1/opt/redis/bin

[iflyer@KDXF-00 bin]$ nohup ./redis-sentinel ../etc/sentinel.conf --sentinel &

#查看3个sentinel.conf:

redis单节点,主从,主从加哨兵搭建_第4张图片

redis单节点,主从,主从加哨兵搭建_第5张图片

redis单节点,主从,主从加哨兵搭建_第6张图片

 

 

 

 

#查看sentinel信息:

[iflyer@KDXF-01 bin]$ ./redis-cli -a test123 -p 26379 info sentinel

redis单节点,主从,主从加哨兵搭建_第7张图片

 

#查看主从信息:

[iflyer@KDXF-02 bin]$ ./redis-cli -p 6379 -h 192.168.213.23 -a test123 info replication

[iflyer@KDXF-02 bin]$ ./redis-cli -p 6379 -h 192.168.213.24 -a test123 info replication

redis单节点,主从,主从加哨兵搭建_第8张图片

redis单节点,主从,主从加哨兵搭建_第9张图片

 

 

验证:

#关闭主库:

[iflyer@KDXF-00 bin]$  redis-cli -p 6379 -a test123  shutdown

[iflyer@KDXF-00 bin]$ ps -ef | grep redis

iflyer    1670     1  0 Oct07 ?        00:01:41 ./redis-sentinel *:26379 [sentinel]

iflyer    1885  1484  0 05:02 pts/1    00:00:00 grep --color=auto redis

#查看sentinel信息:

[iflyer@KDXF-02 bin]$ ./redis-cli -a test123 -p 26379 info sentinel

redis单节点,主从,主从加哨兵搭建_第10张图片

 

#等待指定时间后(down-after-milliseconds)查看哨兵信息,可以看出从库已切换成主库:

 

 

redis单节点,主从,主从加哨兵搭建_第11张图片

你可能感兴趣的:(redis单节点,主从,主从加哨兵搭建)