Haproxy搭建Web群集与日志管理

文章目录

一、Haproxy应用分析
二、Haproxy调度算法原理
三、Haproxy配置文件详解
四、Haproxy日志管理
五、实验：利用Haproxy搭建Web群集与日志

一、Haproxy应用分析

LVS在企业中抗负载能力很强，但存在不足

LVS不支持正则处理，不能实现动静分离
对于大型网站，LVS的实施配置复杂，维护成本相对较高

Haproxy是一款可提供高可用性、负载均衡、及基于TCP和HTTP应用的代理的软件

适用于负载大的Web站点
运行在硬件上可支持数以万计的并发连接请求

二、Haproxy调度算法原理

Haproxy支持多种调度算法，最常用的有三种

RR（Round Robin）

RR算法是最简单最常用的一种算法，即轮询调度

LC（Least Connections)

最小连接数算法，根据后端的节点连接数大小动态分配前端请求

SH（Source Hashing）

基于来源访问调度算法，用于一些有Session会话记录在服务器端的场景，可以基于来源的IP，Cookie等做集群调度

三、Haproxy配置文件详解

Haproxy配置文件通常分为三个部分

global：为全局配置
defaults：为默认配置
listen：为应用组件配置

global配置参数

参数	说明
log 127.0.0.1 local0	配置日志记录，local0位日志设备，默认存放到系统日志
log 127.0.0.1 local1 notice	notice为日志级别，通常有24个级别
maxconn 4096	最大连接数
uid 99	用户uid
gid 99	用户gid

default配置项配置默认参数，一般会被应用组件继承
如果应用组件中没有特别声明，将按默认配置参数设置

log global：定义日志为global配置中的日志定义
mode http：模式为http
option httplog：采用http日志格式记录日志
retries 3：检查节点服务器失败连续达到三次则认为节点不可用
maxconn 2000：最大连接数
contimeout 5000：连接超时时间
clitimeout 50000：客户端超时时间
srvtimeout 50000：服务器超时时间

listen配置项目一般为配置应用模块参数

listen appli4-bakcup 0.0.0.0:10004:定义一个appli4-backup的应用
option httpchk /index.html：检查服务器的index.html文件
option persist：强制将请求发送到已经down掉的服务器
balance roundrobin：负载均衡调度算法使用轮询算法
server inst1 192.168.114.56:80 check inter 2000 fall 3:定义在线节点
server inst2 192.168.114.56:81 check inter 2000 fall 3 backup:定义备份节点

四、Haproxy日志管理

日志是默认输出到系统的syslog中，生产环境中一般单独定义
定义的方法步骤

修改Haproxy配置文件中关于日志配置的选项，加入配置
修改rsyslog配置，将Haproxy相关的配置独立定义到haproxy.conf，并放到/etc/rsyslog.d下
保存配置文件并重启rsyslog服务，完成rsyslog配置

随着企业网站负载增加，haproxy参数优化相当重要

maxconn：最大连接数，根据应用实际情况进行调整，推荐使用10 240
daemon：守护进程模式，Haproxy可以使用非守护进程模式启动，建议使用守护进程模式启动
nbproc：负载均衡的并发进程数，建议与当前服务器CPU核数相等或为其2倍
retried：重试次数，主要用于对集群节点的检查，如果节点多，并且并发量大，设置为2次或3次
option http-server-close：主动关闭http请求选项，建议在生产环境中使用此选项
timeout http-keep-alive：长连接超时时间，设置长连接超时时间，可以设置为10s
timeout http-request：http请求超时时间，建议将此时间设置为5~10s，增加http连接释放速度
timeout client：客户端超时时间，如果访问量过大，节点响应慢，可以将此时间设置短一些，建议设置为1min左右就可以

五、实验：利用Haproxy搭建Web群集与日志

实验环境：Centos7.6、VMware Workstation 15.5、Xshell6、haproxy-1.5.19
本次所使用的软件包下载地址：https://wwa.lanzous.com/i9T1Rgaum1e
实验资源规划：

服务器用途	IP
Haproxy	192.168.50.133
Web节点1	192.168.50.134
Web节点2	192.168.50.135

实验步骤：

1、分别在两台Web节点上分别部署Nginx并创建test.html站点文件

PS：如果没有部署过的也可以参考我之前的博文：https://blog.csdn.net/u014042047/article/details/107954088

## 这里就简要写一下步骤：

yum -y install gcc gcc-c++ zlib-devel pcre pcre-devel     ## 安装依赖环境
useradd -M -s /sbin/nologin nginx              ## 创建NGINX程序用户

## 配置
./configure \
--prefix=/usr/local/nginx \
--user=nginx \
--group=nginx \

make && make install         ## 编译&安装

ln -s /usr/local/nginx/sbin/nginx /usr/local/bin/         ## 将nginx命令建立软连接便于系统管理

nginx      ## 启动nginx服务

分别在两台Web服务器上创建站点文件：
vim /usr/local/nginx/html/test.html 

在Web1上写入：
<h1>test1</h1>

在Web2上写入：
<h1>test2</h1>

2、在haproxy服务器上进行安装编译环境

yum -y install \
pcre-devel \
bzip2-devel \
gcc \
gcc-c++ \
make

3、解压缩haproxy安装包

tar zxvf haproxy-1.5.19.tar.gz

4、编译&安装

cd haproxy-1.5.19/          ## 进入软件目录
make TARGET=linux26         ## 编译
make install                ## 安装

5、为haproxy创建配置文件目录

mkdir /etc/haproxy             ## 创建配置文件目录
cp examples/haproxy.cfg /etc/haproxy/       ## 将配置文件模板放到创建的目录中

6、编辑并修改haproxy配置文件

vim /etc/haproxy/haproxy.cfg      ## 修改配置文件

注释掉以下两行：
#chroot /usr/share/haproxy
#redispatch

将27行开始的Listen段全部删除，写入如下内容：

listen webcluster 0.0.0.0:80
         option httpchk GET /test.html     ## 这里的test.html是我在Web节点上新建的站点页面
         balance roundrobin
         server inst1 192.168.50.134:80 check inter 2000 fall 3   ## 这里的IP改为Web节点IP
         server inst2 192.168.50.135:80 check inter 2000 fall 3   ## 同上

7、将服务启动脚本让系统service进行管理

cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy    ## 复制启动脚本到init.d目录
chmod +x /etc/init.d/haproxy        ## 为脚本添加执行权限
chkconfig --add /etc/init.d/haproxy     ## 增加所指定的系统服务，让chkconfig指令得以管理它
ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy

8、启动服务

service haproxy start

9、在宿主机上打开浏览器访问http://192.168.50.133/test.html看到如下页面说明实验成功！

下面进行日志管理配置：

10、并修改编辑haproxy文件

vim /etc/haproxy/haproxy.cfg     ## 编辑配置文件

修改如下内容：
log /dev/log   local0 info
log /dev/log   local0 notice

11、修改完成后重启服务

service haproxy restart

12、创建并编辑haproxy日志配置文件

touch /etc/rsyslog.d/haproxy.conf       ## 创建日志定义配置文件
vim /etc/rsyslog.d/haproxy.conf         ## 编辑配置文件

写入如下脚本：

if ($programname == 'haproxy' and $syslogseverity-text == 'info')
then -/var/log/haproxy/haproxy-info.log
&~
if ($programname == 'haproxy' and $syslogseverity-text == 'notice')
then -/var/log/haproxy/haproxy-notice.log
&~

13、重启rsyslog和haproxy服务

systemctl restart rsyslog.service
service haproxy restart

14、到就可以看到日志信息了

[root@localhost ~]# ls -l /var/log/haproxy/
总用量 12
-rw-------. 1 root root 4564 9月   2 22:29 haproxy-info.log
-rw-------. 1 root root  136 9月   2 19:04 haproxy-notice.log