前言* 随着互联网IT行业的发展，越来越多的企业开始使用开源软件搭建自己的web架构，主流的LVS也得到了广泛的应用，在保证高可用的同时，用户对网站的体验速度也有了很高的要求，这时候需要我们在我们的架构既要满足高并发同时还要求高速度。 今天我们来搭建主流架构Lvs+Keepalived+Squid+Nginx

实施环境及相关软件：

 
  
     
   
  1. 系统：CentOS6.0 x64       
    2.  
   
  2. Ipvsadm：ipvsadm-1.24.tar.gz       
    3.  
   
  3. Keepalived：keepalived-1.1.15.tar.gz       
    4.  
   
  4. Squid：squid-3.1.10        
    5.  
   
  5. Nginx：nginx-1.2.0.tar.gz       
    6.  
   
  6. Ip信息：       
    7.  
   
  7. Lvs-master 192.9.117.139       
    8.  
   
  8. Lvs-backup 192.9.117.140       
    9.  
   
  9. Lvs-vip    192.9.117.145       
    10.  
   
  10. Squid_1 192.9.117.141       
    11.  
   
  11. Squid_2 192.9.117.142       
    12.  
   
  12. Nginx_1 192.9.117.143       
    13.  
   
  13. Nginx_1 192.9.117.144 
    14.  
  
 
  
网络架构图：
 
  
 
   LVS+Keepalived+Squid+Nginx高可用负载均衡缓存配置_第1张图片 
  
 
  
 
   一、Lvs+Keepalived安装 
  
 
  
 
  
     
   
  1. 1、下载源码包  
    2.  
   
  2. cd /usr/src/   
    3.  
   
  3. wget http://www.linuxvirtualserver.org/software/kernel-2.6/ipvsadm-1.24.tar.gz    
    4.  
   
  4. wget http://www.keepalived.org/software/keepalived-1.1.15.tar.gz  
    5.  
   
  5. 2、建立软链接  
    6.  
   
  6. ln -s /usr/src/kernels/2.6.* /usr/src/linux  
    7.  
   
  7. 3、安装ipvsadm、keepalived  
    8.  
   
  8. cd /usr/src/ && tar xzvf ipvsadm-1.24.tar.gz &&cd ipvsadm-1.24   
    9.  
   
  9. && make && make install  
    10.  
   
  10. cd /usr/src/  &&  tar -xzvf keepalived-1.1.15.tar.gz  &&   
    11.  
   
  11. cd keepalived-1.1.15  && ./configure  &&  make  &&  make install  
    12.  
   
  12. 4、配置keepalived  
    13.  
   
  13. cp /usr/local/etc/rc.d/init.d/keepalived /etc/rc.d/init.d/   
    14.  
   
  14. cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/   
    15.  
   
  15. mkdir -p /etc/keepalived   
    16.  
   
  16. cp /usr/local/etc/keepalived/keepalived.conf /etc/keepalived/  
    17.  
   
  17. cp /usr/local/sbin/keepalived /usr/sbin/  
    18.  
  
 
  
 
   5、修改keepalived配置文件 
  
 
  
 
   vi /etc/keepalived/keepalived.conf 
   ，根据实际情况修改： 
  
 
  
 
  
     
   
  1. ! Configuration File for keepalived  
    2.  
   
  2. global_defs {  
    3.  
   
  3.    notification_email {  
    4.  
   
  4.       [email protected]  
    5.  
   
  5.    }  
    6.  
   
  6.    notification_email_from [email protected]  
    7.  
   
  7.    smtp_server 127.0.0.1  
    8.  
   
  8.    smtp_connect_timeout 30  
    9.  
   
  9.    router_id LVS_DEVEL  
    10.  
   
  10. }  
    11.  
   
  11. # VIP1  
    12.  
   
  12. vrrp_instance VI_1 {  
    13.  
   
  13.     state MASTER //备份服务器改成BACKUP  
    14.  
   
  14.     interface eth0  
    15.  
   
  15.     lvs_sync_daemon_inteface eth0  
    16.  
   
  16.     virtual_router_id 51  
    17.  
   
  17.     priority 100 //备份服务器改成90  
    18.  
   
  18.     advert_int 5  
    19.  
   
  19.     authentication {  
    20.  
   
  20.         auth_type PASS  
    21.  
   
  21.         auth_pass 1111  
    22.  
   
  22.     }  
    23.  
   
  23.     virtual_ipaddress {  
    24.  
   
  24.         192.9.117.145 //VIP地址  
    25.  
   
  25.     }  
    26.  
   
  26. }  
    27.  
   
  27. virtual_server 192.9.117.145 80 {  
    28.  
   
  28.     delay_loop 6  
    29.  
   
  29.     lb_algo rr //lvs算法  
    30.  
   
  30.     lb_kind DR  
    31.  
   
  31.    persistence_timeout 60  
    32.  
   
  32. protocol TCP  
    33.  
   
  33.     real_server 192.9.117.141 80 {  
    34.  
   
  34.         weight 100  
    35.  
   
  35.         TCP_CHECK {  
    36.  
   
  36.         connect_timeout 10  
    37.  
   
  37.         nb_get_retry 3  
    38.  
   
  38.         delay_before_retry 3  
    39.  
   
  39.         connect_port 80  
    40.  
   
  40.         }  
    41.  
   
  41.     }  
    42.  
   
  42.  real_server 192.9.117.142 80 {  
    43.  
   
  43.         weight 100  
    44.  
   
  44.         TCP_CHECK {  
    45.  
   
  45.         connect_timeout 10  
    46.  
   
  46.         nb_get_retry 3  
    47.  
   
  47.         delay_before_retry 3  
    48.  
   
  48.         connect_port 80  
    49.  
   
  49.         }  
    50.  
   
  50.     }  
    51.  
   
  51. }  
    52.  
  
 
  
 
  
 
   同理Lvs_backup也如上安装，并修改参数，Lvs+keepalived配置完毕后，启动keepalived, /etc/init.d/keepalived start 即可！然后在squid_1、squid_2分别执行realserver.sh脚本 
  
 
  
 
   二、Squid安装 
  
 
  
 
  
     
   
  1. 1、给squid指定单独的缓存目录:  
    2.  
   
  2. mkdir -p /data/squid &&chown -R squid:squid /data/squid/  
    3.  
   
  3. 2、设置squid日志路径:  
    4.  
   
  4. mkdir -p /data/logs/squid/ && chown -R squid:squid /data/logs/squid/  
    5.  
   
  5. 3、安装squid  
    6.  
   
  6.  yum install squid -y 即可。  
    7.  
   
  7. 4、修改squid.conf配置文件，贴一个简单的squid部分配置文件  
    8.  
   
  8. ####http port 2012 05 20  
    9.  
   
  9. http_port 0.0.0.0:80 vhost vport  
    10.  
   
  10. cache_peer 192.9.117.143 parent 80 0 no-digest no-query originserver  
    11.  
   
  11. cache_peer 192.9.117.144 parent 80 0 no-digest no-query originserver  
    12.  
   
  12. cache_mem 2048 MB  
    13.  
   
  13. maximum_object_size_in_memory 4096 KB  
    14.  
   
  14. cache_dir aufs /data/squid 4000 16 512  
    15.  
   
  15. coredump_dir /data/squid  
    16.  
   
  16. 启动squid /etc/init.d/squid start 即可！  
    17.  
   
  17. 配置完两台squid并启动。并且都可以看到lo:0接口ip地址为VIP地址：  
    18.  
  
 
  
 
   LVS+Keepalived+Squid+Nginx高可用负载均衡缓存配置_第2张图片 
  
 
  
 
   三、Nginx安装 
  
 
  
 
   分别在192.9.117.143、192.9.117.144安装nginx，并配置好相应的测试页面,最后访问LVS-vip结果如下  
   http://192.9.117.145/ 
  
 
  
 
   LVS+Keepalived+Squid+Nginx高可用负载均衡缓存配置_第3张图片 
  
 
  
 
  
 
   查看lvs转发状态 
  
 
  
 
  
 
   LVS+Keepalived+Squid+Nginx高可用负载均衡缓存配置_第4张图片