实战演练

实验一：负载均衡集群企业级应用实战-LVS-nat模式：

一、环境准备：一台centos系统做DR、两台实现过基于LNMP的电子商务网站

机器名称                     IP配置                             服务角色               备注

lvs-server                    VIP:172.17.252.91            负载均衡器            开启路由功能（VIP桥接、DIP仅主机）

                  DIP:192.168.59.131

lnmp-server01     RIP:192.168.59.133     后端服务器      网关指向DIP（仅主机）

lnmp-server02     RIP:192.168.58.134     后端服务器      网关指向DIP（仅主机）

 

先测试一下两台后端服务器都可以正常打开网站

实验——LVS负载均衡集群_第1张图片

实验——LVS负载均衡集群_第2张图片


二、安装步骤：

1．yum install ipvsadm -y   #在LVS-server安装lvs管理软件

060fa2d1d467213b4f7b92827d4d848d.png

2、grep -i -C 10 "ipvs" /boot/config-VERSION-RELEASE.x86_64，#查看内核是否支持ipvs模块实验——LVS负载均衡集群_第3张图片

3、iptables -F && setenforing 清空防火墙策略，关闭selinux

 

三、配置基于NAT模式的LVS负载均衡集群:

lvs-server配置


1、ipvsadm -A -t 172.17.252.91:80 -s wrr

#开启一个基于80端口的虚拟服务，调度方式为wrr

2、ipvsadm -a -t 172.17.252.91:80  -r 192.168.59.133:80 -m -w 1

#配置web服务后端realserver01  为nat工作方式 权重为1

3、ipvsadm -a -t 172.17.252.91:80  -r 192.168.59.134:80 -m -w 1

#配置web服务后端realserver02  为nat工作方式 权重为1

配完之后可以用ipvsadm-L -n查看一下实验——LVS负载均衡集群_第4张图片

4、修改内核配置，开启路由转发

vim/etc/sysctl.conf    编辑配置文件，添加net.ipv4.ip_forward=1 实验——LVS负载均衡集群_第5张图片

保存退出后，运行sysctl -p 使其生效


     bfcf3f60b2d2e82f21a2c5a83185af92.png


real server配置

配置网关指向192.168.59.131，开启web、php-fpm、mysql服务

route add default gw 192.168.59.131

     5a76484f72dd283fa846583e29805e1f.png

server01、server02都配上这句代码

 

四、LVS集群部署和验证

1、可分别在rs1和rs2建立2个不同内容，统一路径的test.html测试文件，测试负载均衡功能

2、打开http://VIP/index.php ，并在director上用ipvsadm -L -n观察访问连接

3、用另外一台测试机，用ab压力测试工具，测试经过负载均衡后的服务器容量

4、总结整体实验过程，并写成博客




实验二：负载均衡集群企业级应用实战-LVS-DR模式：

一、环境准备：一台centos系统做DR、三台实现过基于LNMP的电子商务网站

机器名称                 IP配置                            服务角色            备注

lvs-server                     VIP:172.17.250.121           负载均衡器            开启路由功能（VIP桥接、DIP仅主机）

                   DIP:192.168.59.131

lnmp-server01     RIP:172.17.251.179      后端服务器      网关指向DIP（桥接）

 lo:VIP:172.17.250.121

lnmp-server02     RIP:172.17.253.73       后端服务器      网关指向DIP（桥接）

 lo:VIP:172.17.250.121

 

二、安装步骤：

1．yum install ipvsadm -y #在LVS-server安装lvs管理软件

2、grep -i -C 10 "ipvs"/boot/config-VERSION-RELEASE.x86_64，#查看内核是否支持ipvs模块

3、iptables -F && setenforing 清空防火墙策略，关闭selinux

 

三、配置基于DR模式的LVS负载均衡集群:

lvs-server配置：

1、配置VIP到本地网卡别名

ifconfigens33:0 172.17.250.121 broadcast 172.17.252.91 netmask 255.255.255.255 up

#配置VIP到本地网卡eth0:0上，并只广播自己

routeadd -host 172.17.250.121 dev ens33:0

#配置VIP路由

2、ipvsadm -A -t  172.17.250.121:80 -s wrr

#开启一个基于80端口的虚拟服务，调度方式为wrr

3、ipvsadm -a -t 172.17.250.121:80 -r172.17.251.179:80-g -w 1

#配置web服务后端realserver  为DR工作方式  权重为1

4、ipvsadm -a -t 172.17.250.121:80 -r172.17.253.73:80-g -w 1

#配置web服务后端realserver  为DR工作方式  权重为1

配完之后可以用ipvsadm-L -n查看一下实验——LVS负载均衡集群_第6张图片

5、修改内核配置，开启路由转发

#vim /etc/sysctl.conf 修改 net.ipv4.ip_forward=1

#sysctl -p 使其生效

 

real server配置（两台都一样）：

ifconfiglo:0 172.17.250.121 broadcast 172.17.250.121 netmask 255.255.255.255 up

#配置VIP到本地回环网卡lo上，并只广播自己

routeadd -host 172.17.250.121 lo:0

#配置本地回环网卡路由

echo"1" >/proc/sys/net/ipv4/conf/lo/arp_ignore

#1  只回答目标IP地址是来访网络接口本地地址的ARP查询请求

echo"2" >/proc/sys/net/ipv4/conf/lo/arp_announce

#2 对查询目标使用最适当的本地地址.在此模式下将忽略这个IP数据包的源地址并尝试选择与能与该地址通信的本地地址.

echo"1" >/proc/sys/net/ipv4/conf/all/arp_ignore

echo"2" >/proc/sys/net/ipv4/conf/all/arp_announce

#关闭arp应答

1: 仅在请求的目标IP配置在本地主机的接收到请求报文的接口上时，才给予响应

2：必须避免将接口信息向非本网络进行通告

开启web、php-fpm、mysql服务

 

四、LVS集群部署和效果验证

1、可分别在rs1和rs2建立2个不同内容，统一路径的test.html测试文件，测试负载均衡功能

实验——LVS负载均衡集群_第7张图片

2、打开http://VIP/index.php ，并在director上用ipvsadm -L -n观察访问连接


3、用另外一台测试机，用ab压力测试工具，测试经过负载均衡后的服务器容量


实验——LVS负载均衡集群_第8张图片



实现LVS持久连接

功能：无论ipvs使用何种scheduler，其都能够实现在指定时间范围内始终将来自同一个ip地址的请求发往同一个RS；此功能是通过lvs持久连接模板实现，其与调度方法无关；

（在上一个DR实验的基础上：）

iptables -t mangle -APREROUTING -d 172.17.250.121 -p tcp --dport 80 -j MARK--set-mark 99

#在iptables打上标记，把80端口标记为99

iptables -t mangle -APREROUTING -d 172.17.250.121 -p tcp --dport 443 -j MARK--set-mark 99

#在iptables打上标记，把443端口标记为99

ipvsadm -A -f99 -s wrr -p

#在lvs上建立基于99号标记的虚拟服务

ipvsadm -a -f99 -r 172.17.251.179 -g

ipvsadm -a -f99 -r 172.17.253.73 -g

#设置后端服务地址

配完可以查看一下实验——LVS负载均衡集群_第9张图片



实现LVS健康状态监测功能

ldirectord：监控和控制LVS守护进程，可管理LVS规则

软件包名称：ldirectord-3.9.6-0rc1.1.1.x86_64.rpm

先下载安装包f56f642b8ab138beeb54f90455b8cd9b.png

将软件包本地安装


0884377dabeab1503f114a314c2de77d.png

软件包组成：

/etc/ha.d/ldirectord.cf    主配置文件

/usr/share/doc/ldirectord-3.9.6/ldirectord.cf  配置模版

/usr/lib/systemd/system/ldirectord.service  服务

/usr/sbin/ldirectord    主程序

/var/log/ldirectord.log  日志

/var/run/ldirectord.ldirectord.pid   pid文件

 

首先在两个realserver上分别建立ok页面：

8685f17ca7b80f641f07af6b53470526.png

然后安装ldirectord，安装好之后查看一下


实验——LVS负载均衡集群_第10张图片

将模板拷贝到/etc/ha.d/下0875af7eeb61f65452e95409ac6ec46a.png

然后编辑配置文件


05436352c11d1ec933c17252b255f994.png


Ldirectord配置文件详解

checktimeout=3                               #超时时间 单位是秒

checkinterval=1                                #检查频率

autoreload=yes                                # 此项用来定义ldirectord是否每隔一段时间检查此配置文件是否发生改变并自动重新加载；

logfile=“/var/log/ldirectord.log“    #日志文件

quiescent=no                                            #down时yes权重为0，no为删除

virtual=172.16.0.1                                      #指定VS的FWM或IP：port

real=172.16.0.7:80gate 2

real=172.16.0.8:80gate 1

fallback=127.0.0.1:80gate           #sorry server

service=http

scheduler=wrr

checktype=negotiate                       #ldirectord进程用于监控RealServer的方法

checkport=80                                   #检查端口

request="index.html"                      #检查页面

receive=“Test"                               #检查内容

实验——LVS负载均衡集群_第11张图片

清空之前的ipvsadm，然后启动服务


查看一下ipvsadm：实验——LVS负载均衡集群_第12张图片

访问ok页面


实验——LVS负载均衡集群_第13张图片

那现在我们将lnmp-server01的服务停止


2905d074149858fa6ba9df61cc85f5d3.png

再看一下ipvsadm，自动将那个服务器踢出去了实验——LVS负载均衡集群_第14张图片

查看日志实验——LVS负载均衡集群_第15张图片

然后我们再把服务启动起来


a6ec0a65e700f11503954598f8638186.png

查看一下ipvsadm，又自动加回来了实验——LVS负载均衡集群_第16张图片