18.11 LVS DR模式搭建

時間  2021-01-30
標籤 html linux nginx git 算法 vim bash 服務器 架構 負載均衡 欄目 負載均衡 简体版
原文   原文鏈接

18.11 DR模式搭建

#dir上編寫腳本 vim /usr/local/sbin/lvs_dr.sh並執行；     //內容以下
#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.133.200
rs1=192.168.133.132
rs2=192.168.133.133
#注意這裏的網卡名字
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens33:2
$ipv -C
$ipv -A -t $vip:80 -s wrr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

#兩臺rs上也編寫腳本 vim /usr/local/sbin/lvs_rs.sh並執行；   //內容以下
#/bin/bash
vip=192.168.133.200
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

一、dir上配置：

編輯腳本文件 vim /usr/local/sbin/lvs_dr.sh並執行：html

[root@DasonCheng ~]# vim /usr/local/sbin/lvs_dr.sh
#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.60.120
rs1=192.168.60.12
rs2=192.168.60.13
#注意這裏的網卡名字
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens33:2
$ipv -C
$ipv -A -t $vip:80 -s wrr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1
……
[root@DasonCheng ~]# sh /usr/local/sbin/lvs_dr.sh

二、兩臺rs上配置：

編輯腳本文件/usr/local/sbin/lvs_rs.sh並執行：linux

[root@aming2 ~]# vim /usr/local/sbin/lvs_rs.sh           //aming3機器也須要編輯執行；
#! /bin/bash
vip=192.168.60.120
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
……
[root@aming2 ~]# sh /usr/local/sbin/lvs_rs.sh
[root@aming3 ~]# vim /usr/local/sbin/lvs_rs.sh
#/bin/bash
vip=192.168.60.120
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
……
[root@aming3 ~]# sh /usr/local/sbin/lvs_rs.sh

三、測試：

分別在dir上和兩個rs上執行這些腳本
測試
[root@aming2 ~]# sh /usr/local/sbin/lvs_rs.sh
[root@aming3 ~]# sh /usr/local/sbin/lvs_rs.sh
[root@DasonCheng ~]# sh /usr/local/sbin/lvs_dr.sh
[root@DasonCheng ~]# ipvsadm -ln    //能夠查看活動鏈接數；
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.60.120:80 wrr
  -> 192.168.60.12:80             Route   1      5          0         
  -> 192.168.60.13:80             Route   1      4          0

mark mark mark

18.12 keepalived lvs

完整架構須要兩臺服務器（角色爲dir）分別安裝keepalived軟件，目的是實現高可用，但keepalived自己也有負載均衡的功能，因此本次實驗能夠只安裝一臺keepalived
 keepalived內置了ipvsadm的功能，因此不須要再安裝ipvsadm包，也不用編寫和執行那個lvs_dir的腳本
 三臺機器分別爲：
 dir（安裝keepalived）133.130
 rs1 133.132
 rs2 133.133
 vip 133.200
 編輯keepalived配置文件 vim /etc/keepalived/keepalived.conf//內容請到https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/lvs_keepalived.conf 獲取
 須要更改裏面的ip信息
 執行ipvsadm -C  把以前的ipvsadm規則清空掉
 systemctl restart network 能夠把以前的vip清空掉
 兩臺rs上，依然要執行/usr/local/sbin/lvs_rs.sh腳本
 keepalived有一個比較好的功能，能夠在一臺rs宕機時，再也不把請求轉發過去
 測試

一、環境準備：

  1. dir1（安裝keepalived，master）60.11；
  2. dir2（安裝keepalived，backup）60.12；
  3. rs1 60.13；
  4. rs2 60.14；

二、master配置：

vrrp_instance VI_1 {
    #備用服務器上爲 BACKUP
    state MASTER
    #綁定vip的網卡爲ens33，你的網卡和阿銘的可能不同，這裏須要你改一下
    interface ens33
    virtual_router_id 51
    #備用服務器上爲90
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass aminglinux
    }
    virtual_ipaddress {
        192.168.60.200
    }
}
virtual_server 192.168.60.200 80 {
    #(每隔10秒查詢realserver狀態)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的鏈接0秒內被分配到同一臺realserver)
    persistence_timeout 0
    #(用TCP協議檢查realserver狀態)
    protocol TCP
    real_server 192.168.60.13 80 {
        #(權重)
        weight 100
        TCP_CHECK {
        #(10秒無響應超時)
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
    real_server 192.168.60.14 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }
}

三、backup配置：

[root@DasonCheng ~]# vim /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
    state BACKUP
    interface ens33
    virtual_router_id 51
    priority 90
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass aminglinux
    }
    virtual_ipaddress {
        192.168.60.200
    }
}
virtual_server 192.168.60.200 80 {
    delay_loop 10
    lb_algo wlc
    lb_kind DR
    persistence_timeout 0
    protocol TCP
    real_server 192.168.60.13 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
    real_server 192.168.60.14 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }
}

四、rs1配置：

[root@aming3 ~]# vim /usr/local/sbin/lvs_rs.sh
#/bin/bash
vip=192.168.60.200
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
……
[root@aming3 ~]# sh /usr/local/sbin/lvs_rs.sh

五、rs2配置：

[root@aming4 ~]# vim /usr/local/sbin/lvs_rs.sh
#/bin/bash
vip=192.168.60.200
#把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#如下操做爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
#參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
……
[root@aming4 ~]# sh /usr/local/sbin/lvs_rs.sh

六、測試：

在測試前，有這幾點注意：nginx

  1. 關閉dir一、2的nginx，避免訪問出錯；
  2. 保證aming3，aming4的nginx處於運行狀態；
  3. aming3，aming4得先curl localhost成功才行；
  4. 關閉dir一、dir二、aming3和aming4的防火牆和selinux；
  5. 保證配置文件的正確性！
  6. ip add查看vip（virtual ip）
  7. systemctl restart keepalived重啓服務；

正常測試：
mark mark mark
關閉aming3：git

[root@aming3 ~]# systemctl stop nginx   
#谷歌的aming3變成了aming4，其餘的刷新無改變；

mark
還原aming3，關閉master：算法

//關閉前：
[root@DasonCheng ~]# ip add
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:f0:f3:49 brd ff:ff:ff:ff:ff:ff
    inet 192.168.60.11/24 brd 192.168.60.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.200/32 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.110/24 brd 192.168.60.255 scope global secondary ens33:1
       valid_lft forever preferred_lft forever
    inet6 fe80::32d1:eea9:5747:f919/64 scope link 
       valid_lft forever preferred_lft forever
……
[root@aming2 ~]# ip add
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:d4:f4:59 brd ff:ff:ff:ff:ff:ff
    inet 192.168.60.12/24 brd 192.168.60.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.100/32 scope global ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::f44b:1b66:dbe1:349a/64 scope link 
       valid_lft forever preferred_lft forever
//關閉後：過了一段時間，能夠正常訪問了；60.200在backup設備上面；
[root@DasonCheng ~]# ip add
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:f0:f3:49 brd ff:ff:ff:ff:ff:ff
    inet 192.168.60.11/24 brd 192.168.60.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.110/24 brd 192.168.60.255 scope global secondary ens33:1
       valid_lft forever preferred_lft forever
    inet6 fe80::32d1:eea9:5747:f919/64 scope link 
       valid_lft forever preferred_lft forever
……
[root@aming2 ~]# ip add
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:d4:f4:59 brd ff:ff:ff:ff:ff:ff
    inet 192.168.60.12/24 brd 192.168.60.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.200/32 scope global ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::f44b:1b66:dbe1:349a/64 scope link 
       valid_lft forever preferred_lft forever

mark mark mark
還原master：vim

#馬上恢復master優先級；
[root@DasonCheng ~]# systemctl start keepalived
[root@DasonCheng ~]# ip add
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:f0:f3:49 brd ff:ff:ff:ff:ff:ff
    inet 192.168.60.11/24 brd 192.168.60.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.200/32 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.60.110/24 brd 192.168.60.255 scope global secondary ens33:1
       valid_lft forever preferred_lft forever
    inet6 fe80::32d1:eea9:5747:f919/64 scope link 
       valid_lft forever preferred_lft forever
相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程