L8.1 lvs+heartbeat-ldirectord实现高可用负载均衡

lvs+heartbeat-ldirectord实现高可用负载均衡

拓扑：

IPVS规则与heartbeat

ipvs规则不再使用ipvsadm配置，而是依靠heartbeat的包工具ldirectord去生成规则

并且ldirectord有检测后端RS健康状况的机制（利用权重，非常正常剔除（w=0），正常后添加）。

删除之前 heartbeat v2 crm lamp配置的约束和资源

节点分别停止heartbeat:/etc/init.d/heartbeat stop

规划

ipvs-ld节点： 192.168.0.190  node1

ipvs-ld点： 192.168.0.201 node2

RS： 192.168.0.193 node3 ，192.168.0.202 node4

lvs vip 192.168.0.199

ldirectord依赖于自己的配置文件生成ipvs规则，因此，定义集群服务，添加RS都在配置文件中指定，而无需手动执行ipvsadm命令；

ldirectord能对各RS的健康状态做检测，并能实现按需添加或者删除各RS。

1，两个节点安装 heartbeat-ldirectord-2.1.4-12.el6.x86_64.rpm 

[root@node2 heartbeat2]# rpm -ivh heartbeat-ldirectord-2.1.4-12.el6.x86_64.rpm 
error: Failed dependencies:
ipvsadm is needed by heartbeat-ldirectord-2.1.4-12.el6.x86_64
perl(LWP::Debug) is needed by heartbeat-ldirectord-2.1.4-12.el6.x86_64
perl(LWP::UserAgent) is needed by heartbeat-ldirectord-2.1.4-12.el6.x86_64
perl(Mail::Send) is needed by heartbeat-ldirectord-2.1.4-12.el6.x86_64

[root@node2 heartbeat2]#yum install heartbeat-ldirectord-2.1.4-12.el6.x86_64.rpm -y

依赖包如下：

2，LVS，DR模式配置

配置RS

node3 ，node4主机分别同样配置主机：

echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore

echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore

echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce

 echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce

ifconfig eth0:0 192.168.0.199 broadcast 192.168.0.199 netmask 255.255.255.255

sysctl -p

route add -host 192.168.0.199 dev eth0:0 

/etc/init.d/httpd start 

curl 192.168.0.194 

配置DR主机ipvs

ifconfig eth0:0 192.168.0.199 broadcast 192.168.0.199 netmask 255.255.255.255

route add -host 192.168.0.199 dev eth0:0

[root@node1 ~]# ipvsadm -A -t 192.168.0.199:80 -s rr
[root@node1 ~]# ipvsadm -a -t 192.168.0.199:80 -r 192.168.0.202 -g -w 1
[root@node1 ~]# ipvsadm -a -t 192.168.0.199:80 -r 192.168.0.194 -g -w 1

访问测试成功：

3，测试出成功后，删除ipvs规则；

[root@node1 ~]# ipvsadm -C
[root@node1 ~]# ipvsadm -L
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
[root@node1 ~]# route del -host 192.168.0.199

[root@node1 ~]# ifconfig eth0:0 down

4，使用ldirectord文件配置规则

 cd /usr/share/doc/heartbeat-ldirectord-2.1.4/

cp ldirectord.cf /etc/ha.d/ 

配置文件说明：

# Global Directives
checktimeout=3  #超时时间间隔
checkinterval=1 #向后端检查的时间，即每1秒检查一次，3秒超时。
#fallback=127.0.0.1:80 #sorry page
autoreload=yes  #自己不用做reload，文件改变后自动装载。
logfile="/var/log/ldirectord.log"       #自己的日志
#logfile="local0"
#emailalert="[email protected]"
#emailalertfreq=3600
#emailalertstatus=all
quiescent=yes

...

以ftp为列说明：

#virtual=192.168.6.240:21    #vip
#       real=192.168.16.3:21 masq    #rs
#       real=192.168.16.5:21 masq    #rs
#       fallback=127.0.0.1:21            #sorry page
#       service=ftp                            #表示用ftp协议检查
#       checkport=21                        #表示检查21号端口，在tcp层
#       scheduler=wlc                        #调度算法
#       scheduler=rr                            #调度算法
#       #persistent=600                #持久连接时间为600秒。注视表示没开启持久连接
#       #netmask=255.255.255.255
#       protocol=tcp                            #集群服务协议类型
#       checktype=negotiate                #协商类型检查，表示下面的登录和密码
#       login="anonymous"                #用anonymous登录
#       passwd="ldirectord@localhost"    #密码
#       request="welcome.msg"            #请求获取到welcome.msg文件
#       receive="test"                            #回答test字符串

以http说明：

virtual=192.168.6.240:80
        real=192.168.6.2:80 gate
        real=192.168.6.3:80 gate
        real=192.168.6.6:80 gate
        fallback=127.0.0.1:80 gate
        service=http
        request="index.html"   #请求哪个页面
        receive="Test Page"        #必须返回哪个字符串，RS才算是正常的
        virtualhost=some.domain.com.au    #对虚拟主机单独检测
        scheduler=rr
        #persistent=600
        #netmask=255.255.255.255
        protocol=tcp
        checktype=negotiate
        checkport=80
        request="index.html"
        receive="Test Page"
        virtualhost=www.x.y.z

常用的检测类型：

checktype = connect|external|negotiate|off|on|ping|checktimeoutN

ip层：connect： syn ，ack就行了

网络层：ping

应用层：negotiate

配置文件修改：

# Sample for an http virtual service

virtual=192.168.0.199:80

        real=192.168.0.194:80 gate

        real=192.168.0.202:80 gate

        fallback=127.0.0.1:80 gate

        protocol=tcp

        checkport=80

        checktype=negotiate

        service=http

        request=".health.html"

        receive="OK"

        scheduler=rr

        #persistent=600

        #netmask=255.255.255.255

将配置文件复制到node2节点

[root@node1 ha.d]# scp ldirectord.cf node2:/etc/ha.d/

两台DR添加sorry page：

vim /var/www/html/index.html

node1 sorry server

两台RS 添加.health.html

vim /var/www/html/.health.html

测试网页都能访问。

5，配置hb_gui crm

定义组ipvs

    定义集群ip clusterip

    定义 ipvs规则 ipsrules  （使用ldirectord定义）

启动组

6，测试

注意：两个HA-DR应该开机自动启动httpd，sorry page页面展示

sorry server页面，两台RS，httpd都stop，HA-LVS权重Weight 为1

通过设置权重为0来剔除RS。