LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

本文我们主要讲解的是LVS通过keepalived来实现负载均衡和高可用,而不是我们第三篇文章介绍的通过手动的方式来进行配置。通过脚本的方式来显示RS节点的健康检查和LVS的故障切换。此文会通过一个实例来讲解,本文目录如下:

一、实验环境需求&准备

二、配置keepalived实现负载均衡&高可用


一、实验环境需求&准备

我们这次实验要完成的一个架构如下图所示,我们通过LVS-DR-MASTER,LVS-DR-BACKUP作为LVS负载均衡调度器,并且两者之间通过keepalived来两者之间的HA。keepalived本身就是为了LVS为开发的,所以说我们通过keepalived来进行LVS的配置就显得十分的方便。而且keepalived是直接操作ip_vs不用通过ipvsadm,所以更加方便。

1)实验架构图&需求表:

LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

服务器规划:

LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

2)部署http服务器,验证能正常访问

这里就不多费篇幅介绍了,就是要保证http能正常访问。

二、配置keepalived实现负载均衡&高可用

1)安装keepalived软件

wget http://www.keepalived.org/software/keepalived-1.2.8.tar.gz

tar -zxf keepalived-1.2.8.tar.gz

cd keepalived-1.2.8

./configure --prefix=/usr/local/keepalived

make

make install

#配置keepalived的自启动&拷贝keepalived的执行程序

cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/

cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/

#开启内核的转发功能

vi /etc/sysctl  net.ipv4.ip_forword = 1

2)配置LVS-DR-MASK的keepalived.conf配置文件

! Configuration File for keepalived


global_defs {

  notification_email {

    [email protected]            #设置报警邮箱,一般不再这做,而是用其他方式报警。

  }

  notification_email_from [email protected]   #设定发送邮件地址

  smtp_server 127.0.0.1                          #设定发送邮件服务器

  smtp_connect_timeout 30                        #设定SMTP连接超时时间

  router_id LVS_DEVEL          #查阅说明文档得知route_id配置是为了标识当前节点,我将其设置为NodeA。当然两个节点的此项设置可相同,也可不相同。

}


vrrp_instance VI_1 {                        #定义虚拟路由实例,不同实例ID不同。

   state MASTER                           #定义服务器在keepalived中的角色主服务器

   interface eth0                          #定义进行检测的端口eth0

   virtual_router_id 51               #定义虚拟路由ID,同一个实例的主从一样。

   priority 100                      #定义在虚拟路由器组的权限,越大越高

   advert_int 1                       #定义检测时间间隔

   authentication {                   #定义认证方式密码,主从必须一样

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {                #指定虚拟IP地址

       192.168.41.249

   }

}

virtual_server 192.168.41.249 80 {  #定义虚拟服务,需指定IP地址和端口,空格隔开。

   delay_loop 6                      #定义RS运行情况监测时间间隔

   lb_algo rr                        #定义负载调度算法

   lb_kind DR                      #定义LVS的工作模式

   nat_mask 255.255.255.0            #定义虚拟服务的mask

   persistence_timeout 50            #定义会话保持时间,S为单位

   protocol TCP                      #指定转发协议

   real_server 192.168.41.31 80 {    #定义真实服务器IP地址和端口

       weight 1                      #定义RS的权重

       TCP_CHECK{                    #RS server健康检查部分

       connect_timeout 10            #定义超出10s连接超

       nb_get_retry 3                #定义重试次数

       delay_before_retry 3          #定义重试时间间隔

       connect_port 80               #定义健康检查端口

   }

   real_server 192.168.41.33 80 {    

       weight 1

       TCP_CHECK{                  

       connect_timeout 10      

       nb_get_retry 3              

       delay_before_retry 3        

       connect_port 80              

   }

}

3)配置LVS-DR-BACKUP的keepalived.conf配置文件

! Configuration File for keepalived


global_defs {

  notification_email {

    [email protected]            #设置报警邮箱,一般不再这做,而是用其他方式报警。

  }

  notification_email_from [email protected]   #设定发送邮件地址

  smtp_server 127.0.0.1                          #设定发送邮件服务器

  smtp_connect_timeout 30                        #设定SMTP连接超时时间

  router_id LVS_DEVEL            #负载均衡器标示,在局域网内是唯一的

}

vrrp_instance VI_1 {                        #定义虚拟路由实例,不同实例ID不同。

   state BACKUP                           #定义服务器在keepalived中的角色

   interface eth0                          #定义进行检测的端口eth0

   virtual_router_id 51               #定义虚拟路由ID,同一个实例的主从一样。

   priority 50                       #定义在虚拟路由器组的权限,越大越高

   advert_int 1                       #定义检测时间间隔

   authentication {                   #定义认证方式密码,主从必须一样

       auth_type PASS

       auth_pass 1111

   }

   virtual_ipaddress {                #指定虚拟IP地址

       192.168.41.249

   }

}

virtual_server 192.168.41.249 80 {  #定义虚拟服务,需指定IP地址和端口,空格隔开。

   delay_loop 6                      #定义RS运行情况监测时间间隔

   lb_algo rr                        #定义负载调度算法

   lb_kind DR                      #定义LVS的工作模式

   nat_mask 255.255.255.0            #定义虚拟服务的mask

   persistence_timeout 50            #定义会话保持时间,S为单位

   protocol TCP                      #指定转发协议

   real_server 192.168.41.31 80 {    #定义真实服务器IP地址和端口

       weight 1                      #定义RS的权重

       TCP_CHECK{                    #RS server健康检查部分

       connect_timeout 10            #定义超出10s连接超时

       nb_get_retry 3                #定义重试次数

       delay_before_retry 3          #定义重试时间间隔

       connect_port 80               #定义健康检查端口

   }

   real_server 192.168.41.33 80 {    

       weight 1

       TCP_CHECK{                  

       connect_timeout 10      

       nb_get_retry 3              

       delay_before_retry 3        

       connect_port 80              

   }


说明:这里主LVS-DR-MASTER和LVS-DR-BACKUP之间的配置的差别就只有红色部分:HA的角色(MASTER,BACKUP)和优先级不同,还有router_id。

4)客户端配置LVS参数

客户端需要做的工作就是绑定我们的VIP在lo口,并且进行ARP抑制,之前的文章已经提过此方法咯。现在我们就换成将配置写成脚本来执行。

脚本内容:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
[[email protected] ~]# cat lvs-client.sh
#!/bin/bask
#       [email protected]
#
/etc/rc.d/init.d/functions
VIP=(
192.168.41.249
)
function start(){
  for ((i=0;i<`echo ${#VIP[*]}`;i++))
      do
       echo ${i}  ${VIP[$i]}
       ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up
       route add -host ${VIP[$i]} dev lo
       done
echo "1">/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2">/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1">/proc/sys/net/ipv4/conf/all/arp_announce
echo "2">/proc/sys/net/ipv4/conf/all/arp_announce
}
function  stop(){
  for ((i=0;i<${#VIP[*]};i++))
      do
       echo ${i}  ${VIP[$i]}
       ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up
       route del -host ${VIP[$i]} dev lo:${i}
       done
}
case "$1" in
   start)
       start
       exit
       ;;
   stop)
       stop
       exit
       ;;
   *)
       echo "You must use $0:stop|start"
       ;;
esac

5)测试实验结果

如果测试部成功可以按照三角的排查原理来进行排查,显示client到RS端是否能通讯,LB到RS能否通讯,client到LB是否能通讯,client到VIP是否能够通讯。并且查看LVS的运行状态。一定要确保keepalived.conf这个配置文件是正确的。

             

转载地址:

-------------------LVS专题------------------------

LVS原理详解及部署之一:ARP原理准备

LVS原理详解及部署之二:LVS原理详解(3种工作方式8种调度算法)

LVS原理详解及部署之三:手动部署LVS

LVS原理详解及部署之四:keepalived介绍

LVS原理详解及部署之五:LVS+keepalived实现负载均衡&高可用

-------------------------------------------------



      本文转自027ryan  51CTO博客,原文链接:http://blog.51cto.com/ucode/1761016,如需转载请自行联系原作者