FastDFS蛋疼的集群和负载均衡(十七)之解决LVS+Keepalived遇到的问题

diary_report.jpg

Interesting things

我在配置LVS+Keepalived遇到几个比较棘手的问题，于是乎记录总结一波。

What did you do today

• 问题1：首先就是主备lvs开启防火墙之后，主备lvs的eth0节点都会出现虚拟ip192.168.12.100。我之前的方法是关闭主备lvs的防火墙，这种方法貌似不是一种好的解决方式。

1.在防火墙添加VRRP通讯支持引用，命令:iptables -A INPUT -d 224.0.0.18 -j ACCEPT

image.png

image.png

image.png

2.好像防火墙加了这个策略，也不能解决问题，那么我们安装tcpdump，分析一下vrrp的组播情况。安装命令: yum install -y tcpdump

image.png

3.查看vrrp的组播情况，tcpdump vrrp -n,很明显的可以看到192.168.12.4和192.168.12.8这2个ip在轮流发送组播信号。而正常的应该是MASTER服务器发送组播，如果BACKUP收不到MASTER的组播信号，那么就判定MASTER宕机了，BACKUP就接收vip。

image.png

4.先确定服务器的SElinux是否设置为关闭，查看SElinux的状态，命令：getenforce，Enforcing#强制开启，Permissive#宽容模式，Disabled#关闭。如果是Enforcing强制模式，我就需要关闭。命令:setenforce 0#设置宽容模式,但是这样只在本次生效，重启服务器后将失效。如果需要永久关闭，还需要修改配置文件。sed -i 's/=enforcing/=disabled/g' /etc/sysconfig/selinux

image.png

5.进入/etc/sysconfig/目录下的selinux,注释掉SELINUX=targeted

image.png

6.我们查看防火墙，看到蛋疼的一幕。 -A INPUT -d 224.0.0.18/32 -j ACCEPT写在-A INPUT -j REJECT --reject-with icmp-host-prohibited后面了，正确的写法应该是写在-A INPUT -j REJECT --reject-with icmp-host-prohibited的前面。我们需要修改过来！

image.png

7.现在我们在主lvs和备lvs查看vrrp的组播情况，发现只有192.168.12.4发给192.168.12.8的情况，这就很爽了嘛！

image.png

image.png

8. 通过ip a 查看各个节点ip情况。发现只有主lvs的eth0节点有vip，备lvs没有。完美解决！

   
   
   

   image.png
   
   
   

   image.png

• 问题2：通过ipvsadm -ln查看lvs以及对应的RealServer信息，但是发现RealServer只有192.168.12.2:80。正常情况下是有192.168.12.3:80和192.168.12.2:80

  
  
  

  image.png

1.通过/var/log/keepalived.log，发现主lvs连接192.168.12.3:80失败了！

image.png

2. 我们来查看nginx1(192.168.12.2)和nginx2(192.168.12.3)的lo:0节点，显示是虚拟ip192.168.12.100，这是没问题的！

   
   
   

   image.png
   
   
   

   image.png
   
   

   3.那我们只能拿出杀手锏了，重启虚拟机。

   
   
   

   5~%R}4R4WLK}JJ}V19%@W40.jpg
   
   4.重启后，我们再来看ipvsadm -ln，发现RealServer有192.168.12.2:80和192.168.12.3:80了，美滋滋。
   
   

   image.png

Summary

路漫漫其修远兮，吾将上下而求索。下一篇LVS+Keepalived双主模式。