HAProxy+KeepAlived构建高可用的反向代理

发布时间:2020-04-18编辑:脚本学堂
本文介绍下,使用haproxy与keepalived配置高可用的反向代理系统的方法,有需要的朋友,可以参考下,相当不错 一篇文章。

前言
对于访问量较大的网站来说,随着流量的增加单台服务器已经无法处理所有的请求,这时候需要多台服务器对大量的请求进行分流处理,即负载均衡。而如果实现负载均衡,必须在网站的入口部署服务器(不只是一台)对这些请求进行分发,这台服务器即反向代理。由于反向代理服务器是网站的入口,其负载压力大且易遭到攻击,存在单点故障的风险,所以我们需要一个高可用的方案来实现当一台反向代理服务器宕机的时候,另一台服务器会自动接管服务。基于以上要求,我们使用HAProxy,KeepAlived来构建高可用的反向代理系统。

介绍
HAProxy是高性能的代理服务器,其可以提供7层和4层代理,具有healthcheck,负载均衡等多种特性,性能卓越,包括Twitter,Reddit,StackOverflow,GitHub在内的多家知名互联网公司在使用。

KeepAlived是一个高可用方案,通过VIP(即虚拟IP)和心跳检测来实现高可用。其原理是存在一组(两台)服务器,分别赋予Master,Backup两个角色,默认情况下Master会绑定VIP到自己的网卡上,对外提供服务。Master,Backup会在一定的时间间隔向对方发送心跳数据包来检测对方的状态,这个时间间隔一般为2秒钟,如果Backup发现Master宕机,那么Backup会发送ARP包到网关,把VIP绑定到自己的网卡,此时Backup对外提供服务,实现自动化的故障转移,当Master恢复的时候会重新接管服务。

环境
 

OS: CentOS Linux release 6.0 (Final) 2.6.32-71.29.1.el6.x86_64
HAProxy: 1.4.18
KeepAlived: 1.2.2
VIP: 192.168.1.99
M: 192.168.1.222
S: 192.168.1.189

架构
                    192.168.1.99
             +-----------VIP----------+  
             |                        |
             |                        |
           Master                   Backup
        192.168.1.189            192.168.1.222
        +----------+             +----------+
        | HAProxy  |             | HAProxy  |
        |keepalived|             |keepalived|
        +----------+             +----------+
             | 
             v 
    +--------+---------+
    |        |         |
    |        |         |
    v        v         v
+------+  +------+  +------+
| WEB1 |  | WEB2 |  | WEB3 |
+------+  +------+  +------+
安装HAProxy
安装pcre
 

复制代码 代码示例:
$ yum install pcre
$ wget http://haproxy.1wt.eu/download/1.4/src/haproxy-1.4.18.tar.gz
$ tar -zxvf haproxy-1.4.18.tar.gz
$ cd haproxy-1.4.18
 

编译参数:
TARGET是指自己系统的内核版本 ARCH指定系统是32位还是64位
CPU=native: use the build machine's specific processor optimizations
更多编译参数内容见源码中的README
 

复制代码 代码示例:
$ make TARGET=linux26 ARCH=x86_64 USE_PCRE=1 CPU=native
$ make install
 

配置文件 /etc/haproxy.cfg
 

复制代码 代码示例:

global
    log 127.0.0.1   local3
    maxconn 20000  
    uid 535  #uid和gid按照实际情况进行配置
    gid 520 
    chroot /var/chroot/haproxy
    daemon
    nbproc 1

defaults
   log     127.0.0.1       local3
   mode    http           
   option  httplog
   option  httpclose
   option  dontlognull
   option  forwardfor
   retries 2
   balance roundrobin
   stats   uri     /haproxy-stats
   contimeout      5000
   clitimeout      50000
   srvtimeout      50000

frontend http-in
        bind *:80
        default_backend pool1

backend pool1
        option httpchk HEAD / HTTP/1.0
        stats refresh 2
        server WEB1 192.168.1.189:81 weight 3 maxconn 10000 check
        server WEB2 192.168.1.222:81 weight 3 maxconn 10000 check
 

查看HAProxy的状态:http://192.168.1.99/haproxy-stats,这个页面会显示HAProxy本身以及后端服务器的状态。

日志
haproxy会把日志记录发送到syslog server(CentOS6下是rsyslogd,UDP514端口)。
编辑/etc/rsyslog.conf文件,添加:
 

复制代码 代码示例:
$ModLoad imudp
$UDPServerRun 514
$UDPServerAddress 127.0.0.1
local3.*                /var/log/haproxy.log
 

重启rsyslog:
 

复制代码 代码示例:
$ /etc/init.d/rsyslog restart
 

自动轮转日志,编辑/etc/logrotate.d/haproxy.cfg,添加:
 

复制代码 代码示例:
/var/log/haproxy.log
{
    rotate 4
    daily
    missingok
    notifempty
    compress
    delaycompress
    sharedscripts
    postrotate
    reload rsyslog > /dev/null 2>&1 || true
    endscript
}
 

启动脚本:
 

复制代码 代码示例:
$ wget -O haproxy https://raw.github.com/gist/3665034/4125bd5b81977a72e5eec30650fb21f3034782a0/haproxy-init.d
$ cp haproxy /etc/init.d/haproxy
$ chmod +x /etc/init.d/haproxy
#使用方式
$ /etc/init.d/haproxy start|stop|restart
 

二,安装KeepAlived
安装依赖库
 

复制代码 代码示例:
$ yum install popt popt-devel
 

安装KeepAlived
 

复制代码 代码示例:

$ wget http://www.keepalived.org/software/keepalived-1.2.2.tar.gz
$ tar -zxvf keepalived-1.2.2.tar.gz
$ cd keepalived-1.2.2
$ ./configure --prefix=/usr/local/keepalived
$ make && make install

$ cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/keepalived
$ cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
$ cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
$ mkdir -p /etc/keepalived/
$ cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/keepalived.conf
$ chmod +x /etc/init.d/keepalived
 

使用方式:
$ /etc/init.d/keepalived start|stop|restart
Master服务器上的配置 /etc/keepalived/keepalived.conf
 

复制代码 代码示例:

global_defs {
   notification_email {
       user@example.com
   }

   notification_email_from mail@example.org
   smtp_server 192.168.x.x
   smtp_connect_timeout 30
   router_id LVS_DEVEL
}

#监测haproxy进程状态,每2秒执行一次
vrrp_script chk_haproxy {
    script "/usr/local/keepalived/chk_haproxy.sh"
    interval 2
    weight 2
}

vrrp_instance VI_1 {
    state MASTER #标示状态为MASTER
    interface eth0
    virtual_router_id 51
    priority 101   #MASTER权重要高于BACKUP
    advert_int 1
    mcast_src_ip 192.168.1.189 #Master服务器IP

    authentication {
        auth_type PASS #主从服务器验证方式
        auth_pass 1111
    }

    track_script {
        chk_haproxy #监测haproxy进程状态
    }

    #VIP
    virtual_ipaddress {
        192.168.1.99 #虚拟IP
    }
}