Keepalived + Nginx 搭建主备高可用

Keepalived + Nginx 搭建主备模式的高可用

Nginx 介绍

nginx是一款高性能的轻量级的http 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器。并且cpu、内存等资源消耗却非常低，运行非常稳定，并发高。很多公司均使用nginx。

---

Keepalived 介绍

keepalived是进群工作管理中保证集群高可用的一个服务软件，用来防止单点故障。
keepalived的作用是检测web服务器的状态，如果有一台web服务器死机，或工作出现故障，keepalived将检测到，并将有故障的web服务器从系统中剔除，当web服务器工作正常后keepalived自动将web服务器加入到服务器群中，这些工作全部自动完成，不需要人工干涉，需要人工做的只是修复故障的web服务器。

---

环境准备

nginx安装包: http://nginx.org/download ，我这里使用1.14.2
keepalived安装包: http://www.keepalived.org/download.html，我这里使用1.4.5

服务器	主备	ip
CentOS7	主	192.168.1.110
CentOS7	备	192.168.1.111

---

环境安装

1. 使用 VMware15Pro + CentOS7 虚拟机。安装教程
2. nginx安装(两台服务器相同步骤安装)
   (1) 安装gcc：yum install gcc-c++
   (2) 安装PCRE库：yum install -y pcre pcre-devel
   (3) 安装zlib库：yum install -y zlib zlib-devel
   (4) 安装openssl：yum install -y openssl openssl-devel
   (5) 上传nginx-1.14.2.tar.gz
   (6) 解压：tar -zxvf nginx-1.14.2.tar.gz
   (7) onfigure配置：cd nginx-1.14.2 && ./configure --prefix=/usr/local/nginx
   (8) 编译：make && make install
   (9) 启动命令：/usr/local/nginx/sbin/nginx
   (10) 浏览器访问：http://ip:80（出现nginx初始页面即安装nginx成功）
   注：如主机访问http://ip:80失败，检查虚拟机端口是否开放。
   为了更容易区分服务器，我这边修改了nginx的index.html页面。
   vim /usr/local/nginx/html/index.html
   

3. keepalived安装(两台服务器相同步骤安装)
   (1) 上传keepalived-1.4.5.tar.gz
   (2) 解压tar -zxvf keepalived-1.4.5.tar.gz
   (2) cd keepalived-1.4.5/
   (3) ./configure --prefix=/usr/local/keepalived
   注：如遇警告 WARNING - this build will not support IPVS with IPv6. Please install libnl/libnl-3 dev libraries to support IPv6 with IPVS。
   则执行：
     yum -y install libnl libnl-devel
     yum install -y libnfnetlink-devel
   (4)make && make install
   (5) 将keepalived安装为linux服务:
     mkdir /etc/keepalived
     cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
     复制keepalived脚本文件：
     cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
     cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
     cp /usr/local/sbin/keepalived /usr/sbin/
     cp /tools/keepalived-1.4.5/keepalived/etc/init.d/keepalived /etc/init.d/
   (6) 设置开机启动：chkconfig keepalived on

---

keepalived配置

 配置详解[https://blog.csdn.net/u010391029/article/details/48311699]
 vim /etc/keepalived/keepalived.conf
 主（MASTER）配置:

! Configuration File for keepalived

global_defs {
  #主要配置预警信息，如邮件发送
}
#keepalived 会定时执行脚本并且对脚本的执行结果进行分析，动态调整vrrp_instance的优先级。
#这里的权重weight 是与下面的优先级priority有关。
#如果执行了一次检查脚本成功，则权重会-20，也就是由100 - 20 变成了80，Master 的优先级为80 就低于了Backup的优先级90，那么会进行自动的主备切换。 
#如果脚本执行结果为0并且weight配置的值大于0，则优先级会相应增加。 
#如果脚本执行结果不为0 并且weight配置的值小于0，则优先级会相应减少。 
vrrp_script chk_nginx {
    script "/etc/keepalived/nginx_check.sh" #运行脚本，当nginx宕机以后，自动开启服务
    interval 2 #检测时间间隔
    weight -20 #如果条件成立的话，则权重 -20，这里比备机的
}
# 定义虚拟路由，VI_1 为虚拟路由的标示符，自己定义名称
vrrp_instance VI_1 {
    state MASTER #来决定主从，主节点为MASTER 备份节点为BACKUP
    interface ens33 # 绑定虚拟 IP 的网络接口，ipconfig查看。
    virtual_router_id 99 # 虚拟路由的 ID 号， 两个节点设置必须一样
    mcast_src_ip 192.168.1.110 #填写本机ip
    priority 100 # 节点优先级,主要比从节点优先级高 取值范围0~254
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔，两个节点设置必须一样，默认 1s
	# 验证信息 两个节点设置必须一样
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    # 将 track_script 块加入 instance 配置块
    track_script {
        chk_nginx #执行 Nginx 监控的服务
    }
	# 虚拟ip,也就是解决写死程序的ip怎么能切换的ip.可设置多个
    virtual_ipaddress {
        192.168.1.99
    }
}

 备份（BACKUP）配置:

! Configuration File for keepalived

global_defs {
  #主要配置预警信息，如邮件发送
}

vrrp_script chk_nginx {
    script "/etc/keepalived/nginx_check.sh" #运行脚本，当nginx宕机以后，自动开启服务
    interval 2 #检测时间间隔
    weight -20 #如果条件成立的话，则权重 -20，这里比备机的
}
# 定义虚拟路由，VI_1 为虚拟路由的标示符，自己定义名称
vrrp_instance VI_1 {
    state BACKUP#来决定主从，主节点为MASTER 备份节点为BACKUP
    interface ens33 # 绑定虚拟 IP 的网络接口，ipconfig查看。
    virtual_router_id 99 # 虚拟路由的 ID 号， 两个节点设置必须一样
    mcast_src_ip 192.168.1.111 #填写本机ip
    priority 80 # 节点优先级,主要比从节点优先级高 取值范围0~254
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔，两个节点设置必须一样，默认 1s
	# 验证信息 两个节点设置必须一样
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    # 将 track_script 块加入 instance 配置块
    track_script {
        chk_nginx #执行 Nginx 监控的服务
    }
	# 虚拟ip,也就是解决写死程序的ip怎么能切换的ip.可设置多个
    virtual_ipaddress {
        192.168.1.99
    }
}

 这里写入启动脚本 vim /etc/keepalived/nginx_check.sh

#!/bin/bash
#判断 nginx 进程是否存在
A=`ps -C nginx –no-header |wc -l`
if [ $A -eq 0 ];then
	#如果为0则尝试启动nginx
    /usr/local/nginx/sbin/nginx
	#给予2秒钟的启动时间
    sleep 2
    if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
		#如果启动失败，将keepalived服务杀死。将转移至备份节点
        killall keepalived
    fi
fi

 脚本赋权: chmod +x /data/program/nginx/sbin/nginx_service.sh

---

启动测试

 启动主备两台的keepalived：service keepalived start
 查询keepalived是否启动：ps -ef|grep keepalived

 停止nginx：/usr/local/nginx/sbin/nginx -s quit
 查询keepalived是否将nginx重启成功：ps -ef | grep nginx

 命令：ip a，192.168.1.99在主nginx上

 页面访问192.168.1.99展示内容为主服务器的ip。

 将主服务器的keepalived关闭：service keepalived stop
 页面访问192.168.1.99展示内容为备份服务器的ip。

---