Linux集羣：LVS搭建負載均衡集羣(二)

1、DR模式LVS搭建

一、準備工做

• 調度器dir：192.168.242.128
• 真實服務器rs1：192.168.242.129，網關恢復爲以前的原始網關
• 真實服務器rs2：192.168.242.130，網關恢復爲以前的原始網關
• VIP：192.168.242.110

二、dir上編寫腳本

[root@zlinux-01 ~]# vim /usr/local/sbin/lvs_dr.sh

#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.242.110
rs1=192.168.242.129
rs2=192.168.242.130
#ifdown ifup 同等於重啓網卡，對虛擬網卡進行重置
#防止再次啓動腳本的時候，再次設置虛擬網卡的IP地址
ifdown ens33
ifup ens33
#注意這裏的網卡名字
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens33:2
$ipv -C
$ipv -A -t $vip:80 -s rr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

[root@zlinux-01 ~]# sh /usr/local/sbin/lvs_dr.sh 
成功斷開設備 'ens33'。
成功激活的鏈接（D-Bus 激活路徑：/org/freedesktop/NetworkManager/ActiveConnection/2）

三、rs上編寫腳本（兩臺內容相同）

[root@zlinux-02 ~]# vim /usr/local/sbin/lvs_dr_rs.sh

#!/bin/bash
vip=192.168.242.110
ifdown lo
ifup lo
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔 www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" > /proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce

[root@zlinux-02 ~]# sh /usr/local/sbin/lvs_dr_rs.sh

四、測試

我在這裏是用的第四臺虛擬機測試的，沒有的話能夠直接在瀏覽器輸入VIP地址測試。

[root@zlinux-04 ~]# curl 192.168.242.110
LVS-zlinux03
[root@zlinux-04 ~]# curl 192.168.242.110
LVS-zlinux02
[root@zlinux-04 ~]# curl 192.168.242.110
LVS-zlinux03
[root@zlinux-04 ~]# curl 192.168.242.110
LVS-zlinux02
[root@zlinux-04 ~]# curl 192.168.242.110
LVS-zlinux03

2、keepalived+LVS

完整架構須要兩臺服務器（角色爲dir）分別安裝keepalived軟件，目的是實現高可用，但keepalived自己也有負載均衡的功能，因此本次實驗能夠只安裝一臺keepalived；
keepalived內置了ipvsadm的功能，因此不須要再安裝ipvsadm包，也不用編寫和執行那個lvs_dir的腳本。

一、準備工做

主keepalived（調度器dir）：192.168.242.128
真實服務器rs1：192.168.242.129，網關恢復爲以前的原始網關
真實服務器rs2：192.168.242.130，網關恢復爲以前的原始網關
VIP：192.168.242.110

二、修改keepalived配置問價

[root@zlinux-01 ~]# cp /etc/keepalived/keepalived.conf /etc/keepalived/keepalived.conf.bak    //備份下配置文件
[root@zlinux-01 ~]# > /etc/keepalived/keepalived.conf     //清空
[root@zlinux-01 ~]# vim /etc/keepalived/keepalived.conf             //添加如下內容

vrrp_instance VI_1 {
    #備用服務器上爲 BACKUP
    state MASTER 
    interface ens33 
    virtual_router_id 51
    #備用服務器上爲90 
    priority 100 
        auth_pass zlinux
    }   
    virtual_ipaddress {
        192.168.242.110
    }   
}   
virtual_server 192.168.242.110 80 {
    #(每隔10秒查詢realserver狀態) 
    delay_loop 10 
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的鏈接60秒內被分配到同一臺realserver)
    persistence_timeout 0 
    #(用TCP協議檢查realserver狀態)
    protocol TCP 
    real_server 192.168.242.129 80 {
        #(權重) 
        weight 100
        TCP_CHECK {
        #(10秒無響應超時)
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }   
    real_server 192.168.242.130 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }  
}

三、啓動keepalived

[root@zlinux-01 ~]# ipvsadm -C           //清空以前的規則，由於以前執行過LVS腳本
[root@zlinux-01 ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
[root@zlinux-01 ~]# systemctl start keepalived     //啓動
[root@zlinux-01 ~]# ps aux | grep keep
root       3406  0.0  0.0 120720  1404 ?        Ss   18:21   0:00 /usr/sbin/keepalived -D
root       3407  0.0  0.1 127464  3324 ?        S    18:21   0:00 /usr/sbin/keepalived -D
root       3408  0.0  0.1 131656  2848 ?        S    18:21   0:00 /usr/sbin/keepalived -D
root       3414  0.0  0.0 112680   976 pts/0    R+   18:25   0:00 grep --color=auto keep

還須要在兩臺rs上執行sh /usr/local/sbin/lvs_dr_rs.sh

四、測試

檢驗方法1：
在瀏覽器輸入VIP192.168.242.110，而後故意停掉一臺rs的Nginx服務，而後刷新瀏覽器看結果。
檢驗方法2：
在調度器執行相關命令，查看鏈接數：

[root@zlinux-01 ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.242.110:80 wlc
  -> 192.168.242.129:80           Route   100    0          0         
[root@zlinux-01 ~]# ipvsadm -ln                 //打開另外一臺Nginx服務，刷新以後，兩個鏈接
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.242.110:80 wlc
  -> 192.168.242.129:80           Route   100    0          0         
  -> 192.168.242.130:80           Route   100    1          0