基于 Haproxy 构建负载均衡集群

时间 2019-11-26

原文原文链接

一、HAPROXY简介php

HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速而且可靠的一种负载均衡解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点一般又须要会话保持或七层处理。HAProxy运行在当前的硬件上，彻底能够支持数以万计的并发链接。而且它的运行模式使得它能够很简单安全的整合进您当前的架构中，同时能够保护你的web服务器不被暴露到网络上。html

官网：http://www.haproxy.com前端

二、HAProxy的特色是：
一、HAProxy支持虚拟主机。
二、HAProxy的优势可以补充Nginx的一些缺点，好比支持Session的保持，Cookie的引导；同时支持经过获取指定的url来检测后端服务器的状态。
三、HAProxy跟LVS相似，自己就只是一款负载均衡软件；单纯从效率上来说HAProxy会比Nginx有更出色的负载均衡速度，在并发处理上也是优于Nginx的。
四、HAProxy支持TCP协议的负载均衡转发，能够对MySQL读进行负载均衡，对后端的MySQL节点进行检测和负载均衡，能够用LVS+Keepalived对MySQL主从作负载均衡。
五、HAProxy负载均衡策略很是多，HAProxy的负载均衡算法如今具体有以下8种：
　　① roundrobin，表示简单的轮询，这个很少说，这个是负载均衡基本都具有的；
　　② static-rr，表示根据权重，建议关注；
　　③ leastconn，表示最少链接者先处理，建议关注；
　　④ source，表示根据请求源IP，这个跟Nginx的IP_hash机制相似，咱们用其做为解决session问题的一种方法，建议关注；
　　⑤ ri，表示根据请求的URI；
　　⑥ rl_param，表示根据请求的URl参数’balance url_param’ requires an URL parameter name；
　　⑦ hdr(name)，表示根据HTTP请求头来锁定每一次HTTP请求；
　　⑧ rdp-cookie(name)，表示根据据cookie(name)来锁定并哈希每一次TCP请求。linux

三、haproxy 配置中分红五部份内容详解nginx

一、global：参数是进程级的，一般是和操做系统相关。这些参数通常只设置一次，若是配置无误，就不须要再次进行修改c++

二、defaults：配置默认参数，这些参数能够被用到frontend，backend，Listen组件web

三、frontend：接收请求的前端虚拟节点，Frontend能够更加规则直接指定具体使用后端的backend算法

四、backend：后端服务集群的配置，是真实服务器，一个Backend对应一个或者多个实体服务器vim

五、Listen Fronted和backend的组合体后端

四、案例环境：

主机操做系统 IP地址主要的软件
----------------------------------------------------------------------------
Haproxy 　 CentOS6.6 x86_64 　 192.168.200.101 haproxy-1.4.24.tar.gz
Nginx1 　　 CentOS6.6 x86_64 　 192.168.200.103 nginx-1.6.2.tar.gz
Nginx2 　　 CentOS6.6 x86_64 　 192.168.200.104 nginx-1.6.2.tar.gz

五、安装配置Haproxy

5.1 安装Haproxy依赖包及源码包编译安装

[root@localhost ~]# yum -y install gcc gcc-c++ make pcre-devel bzip2-devel
[root@localhost ~]# tar xf haproxy-1.4.24.tar.gz -C /usr/src/
[root@localhost ~]# cd /usr/src/haproxy-1.4.24/
[root@localhost haproxy-1.4.24]# make TARGET=linux26 && make install

5.2 创建haproxy的配置目录及文件

[root@localhost haproxy-1.4.24]# mkdir /etc/haproxy
[root@localhost haproxy-1.4.24]# cp examples/haproxy.cfg /etc/haproxy/

5.3 haproxy配置项的介绍

###########全局配置#########
global
 log 127.0.0.1 local0			#日志输出配置，全部日志都记录在本机系统日志，经过local0输出
 log 127.0.0.1 local1 notice	　　　　 #notice为日志级别，一般有24个级别（error warringinfo debug）
 nbproc 1   　　　　　　　　　　　　　　　　 #设置进程数量，一般是CPU核心数或者2倍
 pidfile /etc/haproxy/haproxy.pid       #haproxy 进程PID文件
 maxconn 4096				#最大链接数(需考虑ulimit-n限制 )
 #chroot /usr/share/haproxy             #chroot运行路径
 uid 99					#用户uid
 gid 99					#用户gid
 daemon				　　　　 #守护进程模式，之后台服务形式容许
 #debug                                 #haproxy 调试级别，建议只在开启单进程的时候调试  

########默认配置############ 
defaults
 log global 				#定义日志为global配置中的日志定义
 mode http   			　　　　 #默认的模式mode { tcp|http|health }，tcp是4层，http是7层，health只会返回OK
 option httplog   		　　　　 #日志类别，采用http日志格式记录日志
 #option  dontlognull     　　　　　　　　#不记录健康检查日志信息				
 retries 3 				#检查节点服务器失败次数，连续达到三次失败，则认为节点不可用
 #option  forwardfor   　　　　　　　　　　#若是后端服务器须要得到客户端真实ip须要配置的参数，能够从Http Header中得到客户端i
 #option  httpclose                     #每次请求完毕后主动关闭http通道,haproxy不支持keep-alive,只能模拟这种模式的实现
 maxconn 4096				#最大链接数
 contimeout 5000  			#链接超时时间
 clitimeout 50000 			#客户端超时时间
 srvtimeout 50000 			#服务器超时时间
 #timeout check 2000      　　　　　　　　#心跳检测超时
 #timeout http-keep-alive10s   　　　　  #默认持久链接超时时间
 #timeout http-request   10s    　　　　 #默认http请求超时时间
 #timeoutqueue          1m    　　　　   #默认队列超时时间
  ########统计页面配置######## 
listen admin_stats 
   bind 0.0.0.0:1080 　　　　　　　　　　　#设置Frontend和Backend的组合体，监控组的名称，按须要自定义名称 
   mode http 　　　　　　　　　　　　　　  #http的7层模式 
   option httplog 　　　　　　　　　　　　  #采用http日志格式 
   #log 127.0.0.1 local0 err 　　　　　　　 #错误日志记录 
　　maxconn 10 　　　　　　　　 　　　　    #默认的最大链接数 
　　stats refresh 30s 　　　　　　　　　　　 #统计页面自动刷新时间 
　　stats uri /stats                                 #统计页面url 
　　stats realm Crushlinux\ Haproxy 　　　　#统计页面密码框上提示文本 
　　stats auth admin:admin 　　　　　　　　#设置监控页面的用户和密码:admin,能够设置多个用户名 
　　stats hide-version 　　　　　　　　       #隐藏统计页面上HAProxy的版本信息 
　　#stats admin if TRUE 　　　　　　　　　   #设置手工启动/禁用，后端服务器(haproxy-1.4.9之后版本) 

########设置haproxy 错误页面##### 
　　errorfile 403 /home/haproxy/haproxy/errorfiles/403.http 
　　errorfile 500 /home/haproxy/haproxy/errorfiles/500.http 
　　errorfile 502 /home/haproxy/haproxy/errorfiles/502.http 
　　errorfile 503 /home/haproxy/haproxy/errorfiles/503.http 
　　errorfile 504 /home/haproxy/haproxy/errorfiles/504.http 

########frontend前端配置############## 
bibind *:80 　　#这里建议使用bind *:80的方式，要否则作集群高可用的时候有问题，vip切换到其余机器就不能访问了。 
　　acl web hdr(host) -i www.abc.com 　　#acl后面是规则名称，-i是要访问的域名， 
　　acl img hdr(host) -i img.abc.com 　　　 #若是访问www.abc.com这个域名就分发到下面的webserver 的做用域。 
　　　　　　　　　　　　　　　　　　　　　　 #若是访问img.abc.com.cn就分发到imgserver这个做用域。 
　　use_backend webserver if web 
　　use_backend imgserver if img 

########backend后端配置############## 
backend webserver 　　　  #webserver做用域 
　　mode http 
　　balance roundrobin 　　#banlance roundrobin 轮询，balance source 保存session值，支持static-rr，leastconn，first，uri等参数 
　　option httpchk /index.html HTTP/1.0 　　 #健康检查，检测文件，若是分发到后台index.html访问不到就再也不分发给它 
　　server web1 192.168.200.103:80 cookie 1 weight 1 check inter 2000 rise 2 fall 3 
　　server web2 192.168.200.104:80 cookie 2 weight 1 check inter 2000 rise 2 fall 3 
　　#cookie 1表示serverid为1，check inter 1500 是检测心跳频率 
　　#rise 2是2次正确认为服务器可用，fall 3是3次失败认为服务器不可用，weight表明权重

　　backend imgserver 
　　mode http 
　　option httpchk /index.php 
　　balance roundrobin 
　　server img01 192.168.200.105:80 check inter 2000 fall 3 
　　server img02 192.168.200.106:80 check inter 2000 fall 3 

########tcp配置################# 
listen test1 
　　bind 0.0.0.0:90 
　　mode tcp 
　　option tcplog #日志类别,采用tcplog 
　　maxconn 4086 
　　#log 127.0.0.1 local0 debug 
　　server s1 192.168.200.107:80 weight 1 
　　server s2 192.168.200.108:80 weight 1

5.4 haproxy 配置文件修改

[root@localhost ~]# vim /etc/haproxy/haproxy.cfg
# this config needs haproxy-1.1.28 or haproxy-1.2.1

global
#	log 127.0.0.1	local0
#	log 127.0.0.1	local1 notice
	log /dev/log    local0 info
	log /dev/log	local0 notice
	maxconn 4096
	uid 99
	gid 99
	daemon

defaults
	log	global
	mode	http
	option	httplog
	retries	3
	maxconn	4096
	contimeout	5000
	clitimeout	50000
	srvtimeout	50000

listen	webcluster 0.0.0.0:80
	option	httpchk GET /index.html
	balance	roundrobin
	server	inst1 192.168.200.103:80 check inter 2000 fall 3
	server	inst1 192.168.200.104:80 check inter 2000 fall 3

listen admin_stats
	bind 0.0.0.0:8000
	mode http
	option httplog
	maxconn 100
	stats refresh 30s
	stats uri /stats
	stats realm Crushlinux\ Haproxy
        stats auth admin:admin
	stats hide-version

5.5 准备服务自启动脚本

[root@localhost ~]# cp /usr/src/haproxy-1.4.24/examples/haproxy.init /etc/init.d/haproxy
[root@localhost ~]# ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
[root@localhost ~]# chmod +x /etc/init.d/haproxy 
[root@localhost ~]# /etc/init.d/haproxy start
Starting haproxy:                                          [肯定]

六、安装配置Web服务Nginx　　

6.1 首先搭建Nginx1，

[root@localhost ~]# yum -y install gcc gcc-c++ make pcre-devel zlib-devel openssl-devel
[root@localhost ~]# useradd -M -s /sbin/nologin nginx
[root@localhost ~]# tar xf nginx-1.6.2.tar.gz -C /usr/src
[root@localhost ~]# cd /usr/src/nginx-1.6.2
[root@localhost nginx-1.6.2]# ./configure --prefix=/usr/local/nginx --user=nginx --group=nginx && make && make install
[root@localhost nginx-1.6.2]# cd /usr/local/nginx/html/
[root@localhost html]# echo "server 192.168.200.103" > index.html
[root@localhost html]# /usr/local/nginx/sbin/nginx 
[root@localhost html]# netstat -anpt |grep nginx
tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 4503/nginx

6.2 搭建nginx2，同nginx1搭建方式是同样的。
与6.1惟一不一样的是：

[root@localhost html]# echo "server 192.168.200.104" > index.html

注意：nginx服务控制方式

/usr/local/nginx/sbin/nginx 启动服务
killall -s HUP nginx 从新加载服务
killall -s QUIT nginx 退出服务

七、客户端访问测试：
用浏览器打开 http://192.168.200.101
打开一个新的浏览器再次访问 http://192.168.200.101

能够验证两次访问到的结果分别为：
server 192.168.200.103
server 192.168.200.104

八、Haproxy 日志

Haproxy 的日志默认输出到系统的syslog中，为了更好的管理Haproxy 的日志，在生产环境中通常单独定义出来。
8.1 修改Haproxy配置文件中关于日志配置选项，

[root@localhost ~]# vim /etc/haproxy/haproxy.cfg 
# this config needs haproxy-1.1.28 or haproxy-1.2.1

global
	#log 127.0.0.1	local0 
	#log 127.0.0.1	local1 notice
	
	log /dev/log    local0 info
	log /dev/log	local0 notice
[root@localhost ~]# service haproxy restart
Shutting down haproxy:                                     [肯定]
Starting haproxy:                                          [肯定]

这两行配置放到global选项中，主要是将Haproxy的info和notice日志分别记录到不一样的日志文件中

8.2 修改rsyslog配置
为了便于管理，将Haproxy相关的配置独立定义到haproxy.conf 并放到/etc/rsyslog.d/ 下，rsyslog启动时会自动加载此目录下的全部配置文件。

[root@localhost ~]# vim /etc/rsyslog.d/haproxy.conf
if ($programname == 'haproxy' and $syslogserverity-text == 'info') then -/var/log/haproxy/haproxy-info.log
&~
if ($programname == 'haproxy' and $syslogserverity-text == 'notice') then -/var/log/haproxy/haproxy-notice.log
&~

将haproxy的info日志记录到/var/log/haproxy/haproxy-info.log中，将notice日志记录到/var/log/haproxy/haproxy-notice.log中，将notice日志记录到/var/log/haproxy/haproxy-notice
&~ 表示当写入到日志文件后，rsyslog中止处理这个信息，（rainerscript 脚本语言）

重启rsyslog服务
[root@localhost ~]# service rsyslog restart
关闭系统日志记录器： [肯定]
启动系统日志记录器： [肯定]

8.3 查看日志文件是否建立成功

[root@localhost ~]# ls -l /var/log/haproxy/haproxy-info.log
[root@localhost ~]# ls -l /var/log/haproxy/haproxy-notice.log

Sep 20 23:39:26 localhost haproxy[2674]: 192.168.200.1:51629 [20/Sep/2015:23:38:27.256] web-cluster web-cluster/inst2 0/0/0/1/59740 200 1648 - - CD-- 0/0/0/0/0 0/0 "GET / HTTP/1.1"
Sep 20 23:40:06 localhost haproxy[2674]: 192.168.200.1:51693 [20/Sep/2015:23:39:34.423] web-cluster web-cluster/inst2 0/0/0/0/32120 200 580 - - ---- 1/1/1/1/0 0/0 "GET / HTTP/1.1"

8.4 状态统计功能测试