集群介绍
这些实现高可用和负载均衡的都是软件,是为我们在服务器上的服务所作用的。
keepalived介绍
用keepalived配置高可用集群
在nginx上实现高可用:
准备工作:
准备两台机器133和134,133作为master(主),134作为backup(备用)
两台机器都执行yum install -y keepalived
两台机器都安装nginx,其中133上已经编译安装过nginx,134上需要yum安装nginx: yum install -y nginx
!!(133机器的nginx是使用二进制的源码包安装的,而134机器的nginx是用yum 安装的
,因此总会有区别的,例如在启动服务的时候和使用二进制源码包安装的nginx服务在启动时,可以
使用 /etc/init.d nginx start启动服务(前提是该服务的服务启动文件放在这里),也可以用
systemctl start nginx启动服务。而使用yum安装的nginx只能用:systemctl start nginx启动服务)
一、配置master
1.修改主上master的keepalived配置文件:
下载后的keepalived配置文件在/etc/keepalived/
(编辑133上keepalived配置文件,内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_keepalived.conf获取)
(1)先清除keepalived配置文件内容:
> /etc/keepalived/keepalived.conf
(2)vim /etc/keepalived/keepalived.conf,添加内容:
global_defs {
notification_email {
cansheng@[email protected]
}
notification_email_from root@[email protected]
smtp_server 127.0.0.1
smtp_connect_timeout 30
router_id LVS_DEVEL
}
vrrp_script chk_nginx {
script "/usr/local/sbin/check_ng.sh"
interval 3
}
vrrp_instance VI_1 {
state MASTER
interface ens33
virtual_router_id 51
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass cansheng123456
}
virtual_ipaddress {
192.168.136.100
}
track_script {
chk_nginx
}
}
VIP:虚拟ip,这个IP是由keepalived给服务器配置上的,服务器靠这个VIP
对外提供服务,当master机器宕机,VIP被分配上backup上,这样就能保证服务运作。
2.编写监控脚本(检测服务nginx)
(内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_check_ng.sh获取)
脚本的路径,在配置文件中指定了:
#!/bin/bash
#时间变量,用于记录日志
d=`date --date today +%Y%m%d_%H:%M:%S`
#计算nginx进程数量
n=`ps -C nginx --no-heading|wc -l`
#如果进程为0,则启动nginx,并且再次检测nginx进程数量,
#如果还为0,说明nginx无法启动,此时需要关闭keepalived
if [ $n -eq "0" ]; then
/etc/init.d/nginx start
n2=`ps -C nginx --no-heading|wc -l`
if [ $n2 -eq "0" ]; then
echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log
systemctl stop keepalived
fi
fi
当主master的nginx服务不能启动则要关闭keepalived,不然则会主从出现脑裂
修改脚本的权限:
chmod 755 /usr/local/sbin/check_ng.sh
3.启动keepalived:
systemctl start keepalived
4.测试一下该脚本:
先关闭 nginx ,判断是否会自动启动。
/etc/init.d/nginx stop
可以看出,关闭了nginx 。脚本会执行,自动执行开启nginx服务
5.检查VIP是否加载了在网卡ip:
ip addr (只能用这个命令查看,ifconfig不能看到。)
二、配置从backup
配置前先检查两台机器的防火墙和selinux。要关闭
1.编辑keepalived配置文件
先清空自带内容:> /etc/keepalived/keepalived.conf
vim /etc/keepalived/keepalived.conf
(编辑配置文件,内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_keepalived.conf获取)
内容:
global_defs {
notification_email {
cansheng@[email protected]
}
notification_email_from root@[email protected]
smtp_server 127.0.0.1
smtp_connect_timeout 30
router_id LVS_DEVEL
}
vrrp_script chk_nginx {
script "/usr/local/sbin/check_ng.sh"
interval 3
}
vrrp_instance VI_1 {
state BACKUP
interface ens33
virtual_router_id 51
priority 90
advert_int 1
authentication {
auth_type PASS
auth_pass cansheng123
}
virtual_ipaddress {
192.168.136.100
}
track_script {
chk_nginx
}
}
2.编写监控监本:
vim /usr/local/sbin/check_ng.sh
内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_check_ng.sh获取
内容:
#时间变量,用于记录日志
d=`date --date today +%Y%m%d_%H:%M:%S`
#计算nginx进程数量
n=`ps -C nginx --no-heading|wc -l`
#如果进程为0,则启动nginx,并且再次检测nginx进程数量,
#如果还为0,说明nginx无法启动,此时需要关闭keepalived
if [ $n -eq "0" ]; then
systemctl start nginx
n2=`ps -C nginx --no-heading|wc -l`
if [ $n2 -eq "0" ]; then
echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log
systemctl stop keepalived
fi
fi
编写完脚本修改其权限:
chmod 755 /usr/local/sbin/check_ng.sh
3.开启 keepalived服务:
systemctl start keepalived
现在主和从都有nginx
浏览器查看:
主:192.168.136.133
从:192.168.136.134
(因为nginx是使用yum安装的,所以默认页的路径/usr/share/nginx/html/index.html)
测试:
判断标准:查看VIP 访问的是那个机器的默认页
192.168.136.100
说明这时VIP在master上
测试高可用
测试1:关闭master上的nginx服务
关闭后nginx服务能自动启动,只要keepalived服务启动则加载监控脚本。
测试2:在master上增加iptabls规则 :
iptables -I OUTPUT -p vrrp -j DROP
此时数据已经发生脑裂
(测试后清空 iptables -F)
测试3:关闭master上的keepalived服务:
VIP 释放,从backup得到VIP.浏览器上访问VIP则访问到
backup的机器的默认页。
一般搭建高可用都是使用两台机器,如果是多台机器则在配置文件中,只要修改权重不同就行了。
MySQL做高可用,要保持数据一致才行。
master和backup的keepalived的配置文件中的网卡名字是同一个,这个没有影响吗?backup主机上要是没有那个网卡,keepalived是怎么处理的。
可自配,例如master上叫eth0,backup上叫eth1,在配置文件中指定即可。