HAproxy+keepalived+nginx 实验部署

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

---

前言

---

一、实验准备及数据流向图

Haproxy+keepalived 主服务器  192.168.116.10  漂移vip（192.168.116.200）
Haproxy+keepalived 备服务器  192.168.116.20  漂移vip（192.168.116.200）
nginx1 服务器 192.168.116.30 
nginx2 服务器 192.168.116.50 
客户端   192.168.116.100

二、配置主服务器（haproxy+keepalived）

（一）、关闭防火墙及核心防护

systemctl stop firewalld
systemctl disablle firewalld
setenforce 0

（二）、部署 keepalived服务

yum -y install keepalived   
#下载keepalived服务

1、修改配置文件keeplived.conf

cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak  
备份配置文件

vim /etc/keepalived/keepalived.conf 

 ! Configuration File for keepalived
global_defs {                   #全局参数
  router_id LVS_01              #指定名称，各个服务器名称要不一样
}
vrrp_instance VI_1 {            #指定vrrp热备参数
  state MASTER                  #服务器角色是master，备份服务器设置为BACKUP
  interface ens33               #修改物理网卡名称，默认是centos6的eth0 
  virtual_router_id 51         #组号相同
  priority 120                  #优先级，主服务器设置要大于备服务器
  advert_int 1
  authentication {
   auth_type PASS               #验证类型和密码，不建议修改
   auth_pass 1111
}
virtual_ipaddress {
  192.168.116.200              #漂移地址（VIP）地址，可以有多个
 }
} 

（三）、部署HAproxy服务

1、安装依赖环境

yum -y install pcre-devel zlib-devel gcc gcc-c++ make

2、上传压缩包、解压、编译安装 Haproxy

cd /opt/
mkdir haproxy

上传压缩包

tar zxvf haproxy-1.5.19.tar.gz   
 #解压安装包
cd haproxy-1.5.19/    
#进入解压目录

make TARGET=linux2628 ARCH=x86_64    
 #进行编译
（TARGET=linux2628 表示内核版本，使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628）
（ARCH=x86_64   系统位数，现在基本都是64位）

make install      # 安装

3、修改 Haproxy服务配置文件

mkdir /etc/haproxy  
cp /opt/haproxy/haproxy-1.5.19/examples/haproxy.cfg /etc/haproxy/  复制配置文件

vim /etc/haproxy/haproxy

global     #全局配置，主要用于定义全局参数，属于进程级的配置，通常和操作系统配置有关
--4~5行--修改，定义haproxy日志输出设置和日志级别，local0为日志设备，默认存放到系统日志
        log /dev/log   local0 info        #修改
        log /dev/log   local0 notice      #修改
        #log loghost    local0 info
        maxconn 4096             #最大连接数，需考虑ulimit -n限制，推荐使用10240
--8行--注释，chroot运行路径，为该服务自设置的根目录，一般需将此行注释掉
        #chroot /usr/share/haproxy
        uid 99                    #用户UID
        gid 99                    #用户GID
        daemon                    #守护进程模式
        nbproc 1                  #添加，设置并发进程数，建议与当前服务器CPU核数相等或为其2倍

defaults                          #配置默认参数，这些参数可以被用到Listen，frontend，backend组件     
        log     global            #引入global定义的日志格式
        mode    http              #模式为http（7层代理http，4层代理tcp）
        option  httplog           #日志类别为http日志格式
        option  dontlognull       #不记录健康检查日志信息
        retries 3                 #检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
        redispatch                #当服务器负载很高时，自动结束当前队列处理比较久的连接
        maxconn 2000              #最大连接数，“defaults”中的值不能超过“global”段中的定义
        #contimeout 5000          #设置连接超时时间，默认单位是毫秒
        #clitimeout 50000         #设置客户端超时时间，默认单位是毫秒
        #srvtimeout 50000         #设置服务器超时时间，默认单位是毫秒
     timeout http-request 10s     #默认http请求超时时间
     timeout queue 1m             #默认队列超时时间
     timeout connect 10s          #默认连接超时时间，新版本中替代contimeout，该参数向后兼容
     timeout client 1m            #默认客户端超时时间，新版本中替代clitimeout，该参数向后兼容
     timeout server 1m            #默认服务器超时时间，新版本中替代srvtimeout，该参数向后兼容
     timeout http-keep-alive 10s           #默认持久连接超时时间
     timeout check 10s                     #设置心跳检查超时时间
--删除下面所有listen项--，添加
listen  webcluster 0.0.0.0:80              #haproxy实例状态监控部分配置，定义一个名为webcluster的应用
        option httpchk GET /index.html     #检查服务器的index.html文件 

  此处文件名需要与后面节点服务器页面文件名一致
        balance roundrobin                #负载均衡调度算法使用轮询算法roundrobin
        server inst1 192.168.116.30:80 check inter 2000 fall 3        #定义在线节点
        server inst2 192.168.116.50:80 check inter 2000 fall 3



`参数说明`

balance roundrobin        #负载均衡调度算法
#轮询算法：roundrobin；最小连接数算法：leastconn；来源访问调度算法：source，类似于nginx的ip_hash

check inter 2000        #表示启用对此后端服务器执行健康检查，设置健康状态检查的时间间隔，单位为毫秒
fall 3                    #表示连续三次检测不到心跳频率则认为该节点失效
若节点配置后带有“backup”表示该节点只是个备份节点，仅在所有在线节点都失效该节点才启用。不携带“backup”，表示为主节点，和其它在线节点共同提供服务。

4、添加haproxy 系统服务——注意开启haproxy 服务需要关闭nginx服务

cp /opt/haproxy/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
chmod +x /etc/init.d/haproxy
chkconfig --add /etc/init.d/haproxy  添加到系统管理中

ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy    优化管理
service haproxy start    或    /etc/init.d/haproxy start  

`//如果ningx服务器未部署会提示找不到web服务器，可以等web部署完后再开启haproxy`

三、配置负服务器——backup（haproxy+keepalived）

（一）、关闭防火墙及核心防护

systemctl stop firewalld

systemctl disablle firewalld

setenforce 0

这里我已经关闭过了

（二）、部署 keepalived服务

yum -y install keepalived   下载keepalived服务

1、修改配置文件keeplived.conf

cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak  备份配置文件

vim /etc/keepalived/keepalived.conf 

 ! Configuration File for keepalived
global_defs {                   #全局参数
  router_id LVS_02              #指定名称，各个服务器名称要不一样
}
vrrp_instance VI_1 {            #指定vrrp热备参数
  state BACKUP                  #服务器角色是master，备份服务器设置为BACKUP
  interface ens33               #修改物理网卡名称，默认是centos6的eth0 
  virtual_router_id 51          #组号相同
  priority 100                  #优先级，主服务器设置要大于备服务器
  advert_int 1
  authentication {
   auth_type PASS               #验证类型和密码，不建议修改
   auth_pass 1111
}
virtual_ipaddress {
  192.168.116.200               #漂移地址（VIP）地址，可以有多个
 }
}

（三）、部署HAproxy服务

1、安装依赖环境

yum -y install pcre-devel zlib-devel gcc gcc-c++ make

2、上传压缩包、解压、编译安装 Haproxy

mkdir /opt/haproxy
cd /opt/haproxy/
上传压缩包


tar zxvf haproxy-1.5.19.ta![在这里插入图片描述](https://img-blog.csdnimg.cn/4bfd111d7ac943ddb156c8e4ac72d88b.png)
r.gz    #解压安装包
cd haproxy-1.5.19/    #进入解压目录

make TARGET=linux2628 ARCH=x86_64     #进行编译
（TARGET=linux2628 表示内核版本，使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628）
（ARCH=x86_64   系统位数，现在基本都是64位） 

make install      # 安装

3、修改 Haproxy服务配置文件

mkdir /etc/haproxy  
cp /opt/haproxy/haproxy-1.5.19/examples/haproxy.cfg /etc/haproxy/  复制配置文件 

vim /etc/haproxy/haproxy.cfg

global     #全局配置，主要用于定义全局参数，属于进程级的配置，通常和操作系统配置有关
        log /dev/log   local0 info        #修改
        log /dev/log   local0 notice      #修改
        #log loghost    local0 info
        maxconn 4096             #最大连接数，需考虑ulimit -n限制，推荐使用10240
        #chroot /usr/share/haproxy
        uid 99                    #用户UID
        gid 99                    #用户GID
        daemon                    #守护进程模式
        nbproc 1                  #添加，设置并发进程数，建议与当前服务器CPU核数相等或为其2倍

defaults                          #配置默认参数，这些参数可以被用到Listen，frontend，backend组件     
        log     global            #引入global定义的日志格式
        mode    http              #模式为http（7层代理http，4层代理tcp）
        option  httplog           #日志类别为http日志格式
        option  dontlognull       #不记录健康检查日志信息
        retries 3                 #检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
        redispatch                #当服务器负载很高时，自动结束当前队列处理比较久的连接
        maxconn 2000              #最大连接数，“defaults”中的值不能超过“global”段中的定义
        #contimeout 5000          #设置连接超时时间，默认单位是毫秒
        #clitimeout 50000         #设置客户端超时时间，默认单位是毫秒
        #srvtimeout 50000         #设置服务器超时时间，默认单位是毫秒
     timeout http-request 10s     #默认http请求超时时间
     timeout queue 1m             #默认队列超时时间
     timeout connect 10s          #默认连接超时时间，新版本中替代contimeout，该参数向后兼容
     timeout client 1m            #默认客户端超时时间，新版本中替代clitimeout，该参数向后兼容
     timeout server 1m            #默认服务器超时时间，新版本中替代srvtimeout，该参数向后兼容
     timeout http-keep-alive 10s           #默认持久连接超时时间
     timeout check 10s                     #设置心跳检查超时时间
listen  webcluster 0.0.0.0:80              #haproxy实例状态监控部分配置，定义一个名为webcluster的应用
        option httpchk GET /index.html     #检查服务器的index.html文件 
        balance roundrobin                #负载均衡调度算法使用轮询算法roundrobin
        server inst1 192.168.116.30:80 check inter 2000 fall 3        #定义在线节点
        server inst2 192.168.116.50:80 check inter 2000 fall 3

4、 添加haproxy 系统服务

cp /opt/haproxy/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
chmod +x /etc/init.d/haproxy
chkconfig --add /etc/init.d/haproxy  添加到系统管理中

ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy  
service haproxy start    或    /etc/init.d/haproxy start  //如果ningx服务器未部署会提示找不到web服务器，可以等web部署完后再开启haproxy

四、部署节点服务器

（一）、配置nginx服务器——顺便更改一下主机名为nginx1

systemctl stop firewalld
setenforce 0
systemctl disablle firewalld

rpm -Uvh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm  获取下载镜像源
yum -y install nginx
rpm -ql nginx  查看配置文件位置
vim /usr/share/nginx/html/index.html 修改网页文件

systemctl start nginx
访问页面

（二）、部署httpd服务——（这里我们另一台节点增加的是httpd服务代替另一台NGINX服务器 192.168.116.50）

systemctl stop firewalld
setenforce 0
systemctl disable firewalld

yum -y install httpd
systemctl start httpd

echo "zhb2" > /var/www/html/index.html

访问页面 192.168.116.50

五、用haproxy服务验证——日志收集链接如下中，我之前也做过。

日志收集

（一）、主服务器设置并验证

service haproxy start

systemctl start keepalived  关闭负服务器的keepalived

ip a

1、主haproxy服务器192.168.116.10

2、备服务器192.168.116.20

3、用客户端192.168.116.100 访问192.168.116.100VIP，让后再多刷新几次。查看测试结果。

（二）、负服务器设置并验证

service haproxy start

systemctl start keepalived  关闭主服务器的keepalived

ip a

1、主服务器192.168.116.10

2、备服务器192.168.116.20

3、用客户端192.168.116.100 访问192.168.116.100VIP，让后再多刷新几次。查看测试结果。