Haproxy搭建Web群集

目录

一、常见的Web集群调度器

二、Haproxy简介

2.1 Haproxy 应用分析

2.2 Haproxy的特性

三、Haproxy调度算法原理

四、nginx和lvs、haproxy有什么区别 

五、Haproxy搭建 Web 群集 

5.1 关闭防火墙，将安装Haproxy所需软件包传到/opt目录下

5. 2 编译安装 Haproxy

5.3 Haproxy服务器配置

5.4  添加haproxy 系统服务

5.5  节点服务器部署

5.6  测试 Web群集

5.7  日志定义

---

一、常见的Web集群调度器

• 目前常见的Web集群调度器分为软件和硬件
• 软件通常使用开源的LVS、Haproxy、Nginx
• LVS性能最好，但是搭建相对复杂；Nginx的upstream模块支持集群功能，但是对集群节点健康检查功能不强，高并发没有Haproxy好
• 硬件一般使用的比较多的是F5，也有很多人使用梭子鱼、绿盟等国内产品。 

 

二、Haproxy简介

2.1 Haproxy 应用分析

• LVS在企业应用中抗负载能力很强，但存在不足
• LVS不支持正则处理，不能实现动静分离
• 对于大型网站，LVS的实施配置复杂，维护成功相对较高
• Haproxy是一款可提供高可用性、负载均衡、及基于TCP和HTTP应用的代理的软件
• 适用于负载大的Web站点
• 运行在硬件上可支持数万计的并发连接的连接请求。

2.2 Haproxy的特性

1. 可靠性和稳定性非常好，可以与硬件级的F5负载均衡设备相媲美
2. 最高可以同时维护40000-50000个并发连接，单位时间内处理的最大请求数为20000个，最大处理能力可达10Git/s
3. 支持多达8 种负载均衡算法，同时也支持会话保持
4. 支持虚拟主机功能，从而实现web负载均衡更加灵活
5. 支持连接拒绝、全透明代理等独特功能
6. 拥有强大的ACL支持，用于访问控制
7. 其独特的弹性二叉树数据结构，使数据结构的复杂性上升到了0（1），即数据的查询速度不会随着数据条目的增加而速度有所下降
8. 支持客户端的keepalive功能，减少客户端与haproxy的多次三次握手导致资源量费，让多个请求在一个tcp连接中完成
9. 支持TCP加速，零复制功能，类似于mmap机制
10. 支持响应池（response buffering）
11. 支持RDP协议
12. 基于源的粘性，类似于nginx的ip_hash功能，把来自同一客户端的请求在一定时间内始终调度到上游的同一服务器
13. 更好统计数据接口，其web接口显示后端冀全中各个服务器的接受、发送、拒绝、错误等数据的统计信息
14. 详细的健康状态检测，web接口中有关对上流服务器的健康检测状态，并提供了一定的管理功能
15. 基于流量的健康评估机制
16. 基于http认证
17. 基于命令行的管理接口
18. 日志分析器，可对日志进行分析

 

三、Haproxy调度算法
原理

HAProxy负载均衡策略非常多，常见的有如下8种：

1. roundrobin，表示简单的轮询
2. static-rr，表示根据权重
3. leastconn，表示最少连接者先处理
4. source，表示根据请求源IP
5. uri，表示根据请求的URI,做cdn需使用;
6. url_param，表示根据请求的URl参数'balance url_param' requires an URL parameter name
7. hdr(name)，表示根据HTTP请求头来锁定每一次HTTP请求;
8. rdp-cookie(name)，表示根据cookie(name)来锁定并哈希每一次TCP请求。

 

四、nginx和lvs、haproxy有什么区别 

nginx

1. 支持正则
2. 只支持基于端口的健康检查
3. 不支持session的直接保持、但能通过ip_hash来解决
4. 对网络稳定性要求不高
5. 反向代理能力强

lvs

1. 只能基于四层端口转发
2. 尽在四层做分发作用、扛负载能力强
3. 应用范围广

haproxy

1. 支持8种负载均衡策略
2. 仅作负载均衡软件使用、在高并发情况下性能优于nginx
3. 支持url检测、支持session保持

 

五、Haproxy搭建 Web 群集 

Haproxy服务器	192.168.19.101
Nginx 服务器1：	192.168.19.4
Nginx 服务器2	192.168.19.6
客户端	192.168.19.100

5.1 关闭防火墙，将安装Haproxy所需软件包传到/opt目录下

systemctl stop firewalld
setenforce 0

haproxy-1.5.19.tar.gz

 

 

5. 2 编译安装 Haproxy

---------------------参数说明---------------------------------------------------------------------------
TARGET=linux26	#内核版本，
#使用uname -r查看内核，如：2.6.18-371.el5，此时该参数用TARGET=linux26；kernel大于2.6.28的用TARGET=linux2628

ARCH=x86_64 	#系统位数，64位系统

 

 

 

 

5.3 Haproxy服务器配置

mkdir /etc/haproxy
cp examples/haproxy.cfg /etc/haproxy/

cd /etc/haproxy/
vim haproxy.cfg
global		#全局配置，主要用于定义全局参数，属于进程级的配置，通常和操作系统配置有关
--4~5行--修改，定义haproxy日志输出设置和日志级别，local0为日志设备，默认存放到系统日志
		log /dev/log   local0 info		#修改
        log /dev/log   local0 notice	#修改
        #log loghost    local0 info
        maxconn 4096			#最大连接数，需考虑ulimit -n限制，推荐使用10240
--8行--注释，chroot运行路径，为该服务自设置的根目录，一般需将此行注释掉
        #chroot /usr/share/haproxy
        uid 99					#用户UID
        gid 99					#用户GID
        daemon					#守护进程模式
		nbproc 1				#添加，设置并发进程数，建议与当前服务器CPU核数相等或为其2倍

defaults   	#配置默认参数，这些参数可以被用到Listen，frontend，backend组件     
		log     global			#引入global定义的日志格式
        mode    http			#模式为http（7层代理http，4层代理tcp）
        option  httplog			#日志类别为http日志格式
        option  dontlognull		#不记录健康检查日志信息
        retries 3				#检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
        redispatch				#当服务器负载很高时，自动结束当前队列处理比较久的连接
        maxconn 2000			#最大连接数，“defaults”中的值不能超过“global”段中的定义
        #contimeout 5000        #设置连接超时时间，默认单位是毫秒
        #clitimeout 50000       #设置客户端超时时间，默认单位是毫秒
        #srvtimeout 50000       #设置服务器超时时间，默认单位是毫秒
        timeout http-request 10s 	#默认http请求超时时间
        timeout queue 1m   		#默认队列超时时间
        timeout connect 10s		#默认连接超时时间，新版本中替代contimeout，该参数向后兼容
        timeout client 1m		#默认客户端超时时间，新版本中替代clitimeout，该参数向后兼容
        timeout server 1m		#默认服务器超时时间，新版本中替代srvtimeout，该参数向后兼容
        timeout http-keep-alive 10s		#默认持久连接超时时间
        timeout check 10s		#设置心跳检查超时时间


--删除下面所有listen项--，添加
listen  webcluster 0.0.0.0:80	#haproxy实例状态监控部分配置，定义一个名为webcluster的应用
        option httpchk GET /yh.html	#检查服务器的test.html文件
        balance roundrobin				#负载均衡调度算法使用轮询算法roundrobin
        server inst1 192.168.19.4:80 check inter 2000 fall 3		#定义在线节点
        server inst2 192.168.19.6:80 check inter 2000 fall 3
		

 

 

 

balance roundrobin		#负载均衡调度算法
#轮询算法：roundrobin；最小连接数算法：leastconn；来源访问调度算法：source，类似于nginx的ip_hash

check inter 2000		#表示启用对此后端服务器执行健康检查，设置健康状态检查的时间间隔，单位为毫秒连续三次检测不到心跳频率则认为该
fall 3					#表示节点失效
若节点配置后带有“backup”表示该节点只是个备份节点，仅在所有在线节点都失效该节点才启用。不携带“backup”，表示为主节点，和其它在线节点共同提供服务。

 

 

5.4  添加haproxy 系统服务

​​​​cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
chmod +x haproxy
chkconfig --add /etc/init.d/haproxy

ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
service haproxy start	或	/etc/init.d/haproxy start

 

 

5.5  节点服务器部署

systemctl stop firewalld
setenforce 0

yum install -y pcre-devel zlib-devel gcc gcc-c++ make 

useradd -M -s /sbin/nologin nginx

cd /opt
tar zxvf nginx-1.12.0.tar.gz -C /opt/

cd nginx-1.12.0/
./configure --prefix=/usr/local/nginx --user=nginx --group=nginx && make && make install

make && make install

--192.168.19.4---
echo "this is kgc web" > /usr/local/nginx/html/yh.html

--192.168.19.6---
echo "this is benet web" > /usr/local/nginx/html/yh.html

ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/

nginx      #启动nginx 服务

 

 

 

 

 

 

5.6  测试 Web群集

 

 

 

5.7  日志定义

#默认haproxy的日志是输出到系统的syslog中，查看起来不是非常方便，为了更好的管理haproxy的日志，我们在生产环境中一般单独定义出来。需要将haproxy的info及notice日志分别记录到不同的日志文件中。
vim /etc/haproxy/haproxy.cfg
global
	log /dev/log local0 info
	log /dev/log local0 notice

service haproxy restart

#需要修改rsyslog配置，为了便于管理。将haproxy相关的配置独立定义到haproxy.conf，并放到/etc/rsyslog.d/下，rsyslog启动时会自动加载此目录下的所有配置文件。
vim /etc/rsyslog.d/haproxy.conf
if ($programname == 'haproxy' and $syslogseverity-text == 'info')
then -/var/log/haproxy/haproxy-info.log
&~
if ($programname == 'haproxy' and $syslogseverity-text == 'notice')
then -/var/log/haproxy/haproxy-notice.log
&~

#说明：
这部分配置是将haproxy的info日志记录到/var/log/haproxy/haproxy-info.log下，将notice日志记录到/var/log/haproxy/haproxy-notice.log下。“&~”表示当日志写入到日志文件后，rsyslog停止处理这个信息。

systemctl restart rsyslog.service

tail -f /var/log/haproxy/haproxy-info.log		#查看haproxy的访问请求日志信息