LVS的DR模式 結合mysql主從和nginx

理論基礎請點擊下面的網址:html

http://my.oschina.net/u/1454868/blog/208269mysql

1.網絡架構
hostname:
direct server:10.10.54.85(3306)
vip:10.10.54.89
real server:10.10.54.86(80,3306)
real server:10.10.54.88(80,3306)

2.在10.10.54.86/88兩臺主機上安裝nginx
//編譯nginx1.4.5
# wget http://nginx.org/download/nginx-1.4.5.tar.gz
# tar xvf nginx-1.4.5.tar.gz 
# cd nginx-1.4.5
#./configure --prefix=/usr/local/nginx --user=apache --group=apache --with-http_ssl_module --with-http_stub_status_module --with-http_gzip_static_module && make && make install
//啓動
#/usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
第一次啓動錯誤:
# /usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf
nginx: [emerg] getpwnam("apache") failed
解決方法:
# useradd apache
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
//nginx配置文件格式
user  apache apache;
worker_processes  2;	

//測試配置文件
#/usr/local/nginx/sbin/nginx -t -c /usr/local/nginx/conf/nginx.conf

3.安裝ipvsadm,keepalived-1.2.9
(1)下載軟件
//本機內核版本:
# uname -r
2.6.32-358.el6.x86_64
下載地址: --相應版本
http://www.linuxvirtualserver.org/software/ipvs.html#kernel-2.6
ipvsadm-1.26.tar.gz
keepalived
http://www.keepalived.org/download.html
keepalived-1.2.9.tar.gz
(2)編譯安裝ipvsadm,keepalived-1.2.9
//配置yum源
[root@nan85 lvs]# vim /etc/yum.repos.d/CentOS-ftp.repo 
[Packages]
name=Packages
baseurl=ftp://10.201.1.221/Packages
gpgcheck=0
enable=1
[Packages2]
name=Packages2
baseurl=ftp://10.201.1.221/Packages2
gpgcheck=0
enable=1
#yum clean all
//安裝依賴包
[root@nan85 ipvsadm-1.26]# yum list|grep kernel-dev
[root@nan85 ipvsadm-1.26]# yum list|grep popt
[root@nan85 lvs]# yum install popt-static.x86_64 popt-devel.x86_64 popt.x86_64
[root@nan85 lvs]# yum -y install wget libnl* popt* gcc.x86_64 gcc-c++.x86_64 gcc-objc++.x86_64 kernel-devel.x86_64 make popt-static.x86_64
//確認模塊
[root@nan85 lvs]# modprobe -l|grep ipvs
kernel/net/netfilter/ipvs/ip_vs.ko
kernel/net/netfilter/ipvs/ip_vs_rr.ko
kernel/net/netfilter/ipvs/ip_vs_wrr.ko
kernel/net/netfilter/ipvs/ip_vs_lc.ko
kernel/net/netfilter/ipvs/ip_vs_wlc.ko
kernel/net/netfilter/ipvs/ip_vs_lblc.ko
kernel/net/netfilter/ipvs/ip_vs_lblcr.ko
kernel/net/netfilter/ipvs/ip_vs_dh.ko
kernel/net/netfilter/ipvs/ip_vs_sh.ko
kernel/net/netfilter/ipvs/ip_vs_sed.ko
kernel/net/netfilter/ipvs/ip_vs_nq.ko
kernel/net/netfilter/ipvs/ip_vs_ftp.ko
//編譯keepalived-1.2.9
[root@nan85 lvs]# tar xvf keepalived-1.2.9.tar.gz 
須要安裝基礎軟件包openssl和popt
yum install net-snmp.x86_64 net-snmp-devel.x86_64
./configure --prefix=/usr/local/keepalived --enable-snmp --sysconfdir=/etc/
出現錯誤:
configure: error: unable to find net-snmp-config
解決方法:
[root@nan85 keepalived-1.2.9]# yum install net-snmp.x86_64 net-snmp-devel.x86_64
Keepalived version       : 1.2.9
Compiler                 : gcc
Compiler flags           : -g -O2
Extra Lib                : -Wl,-z,relro -Wl,-z,now -L/usr/lib64 -lnetsnmpagent -lnetsnmphelpers -lnetsnmpmibs -lnetsnmp -Wl,-E -Wl,-rpath,/usr/lib64/perl5/CORE -lssl -lcrypto -lcrypt  -lnl
Use IPVS Framework       : Yes
IPVS sync daemon support : Yes
IPVS use libnl           : Yes
Use VRRP Framework       : Yes
Use VRRP VMAC            : Yes
SNMP support             : Yes
SHA1 support             : No
Use Debug flags          : No
[root@nan85 keepalived-1.2.9]# make && make install
[root@nan85 ~]# cp /usr/local/keepalived/sbin/keepalived /sbin/
[root@nan85 ~]# cp /usr/local/keepalived/bin/genhash /bin/

4.配置real server
即配置10.10.54.86/88
在兩臺real server上作以下操做:
[root@nan86 ~]# vim /etc/init.d/realserver
#!/bin/bash
#description:start realserver
#script_name:realserver_config
VIP=10.10.54.89
source /etc/init.d/functions
case "$1" in
start)
echo "start LVS of realserver."
/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up
echo "1" > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" > /proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce
;;
stop)
/sbin/ifconfig lo:0 down
echo "0" > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo "0" > /proc/sys/net/ipv4/conf/lo/arp_announce
echo "0" > /proc/sys/net/ipv4/conf/all/arp_ignore
echo "0" > /proc/sys/net/ipv4/conf/all/arp_announce
;;
*)
echo "Usage: $0 {start|stop}"
exit 1
esac
//上面代碼解釋
aro_ignore:默認值爲0
	0 --爲默認值,迴應任何網絡接口對本地IP地址的ARP查詢請求。
	1 --只回答目標IP地址時來訪問網絡接口本地地址的ARP查詢請求。

arp_announce:對網絡接口上,本地IP地址發出的ARP請求,作出相應的級別的限制:肯定不一樣程度的限制,宣佈對來自本地源IP地址發出的APR請求的接口。
	0 --爲默認值,在任意網絡接口上的任何本地地址。
	2 --對查詢目標使用最適當的本地地址。

[root@nan86 ~]# chmod +x /etc/init.d/realserver 
[root@nan86 ~]# /etc/init.d/realserver start

5.配置direct server
在direct server上編譯ipvsadm,keepalived軟件包
//配置文件
至關與LVS的外殼
[root@nan85 keepalived]# pwd
/etc/keepalived
在direct server上編譯ipvsadm,keepalived軟件包
//配置文件
[root@tech2 keepalived]# cat keepalived.conf 
! Configuration File for keepalived
global_defs {
   notification_email {
     yangry@shiwei.com
   }
   notification_email_from yangry@shiwei.com
   smtp_server mail.shiwei.com
   smtp_connect_timeout 30
   router_id LVS_MASTER1 
	--表示運行kee 服務器的一個標識,發郵件時顯示在郵件主題中的信息
}
vrrp_instance VI_2 {	--vrrp實例
    state MASTER	--master主機,從用BACKUP標識
    interface eth0	
    virtual_router_id 51 --虛擬路由標識,是一個數字,
			 --同一個VRRP實例使用惟一的標識
    priority 100	 --優先級主從模式,BACKUP小於100
    advert_int 1	 --同步檢查的時間間隔,檢查時間間隔1秒
    authentication {
        auth_type PASS	 --PASS和AH驗證密鑰
        auth_pass 1111	 --密碼
    }
    virtual_ipaddress {	 --虛擬IP
        10.10.54.233/24 dev eth0 label eth0:1
    }
}
virtual_server 10.10.54.233 80 {
    delay_loop 6	 --設置運行狀況檢查時間,單位爲s
    lb_algo rr
    lb_kind DR
    nat_mask 255.255.255.0
    persistence_timeout 50 --會話保持時間
    protocol TCP

    real_server 10.10.54.222 80 { --負載均衡真正的主機
        weight 1		  --權值
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3	  --重試的次數
            delay_before_retry 3  --重試的間隔
            connect_port 80
        }
    }
    real_server 10.10.54.226 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }
}

6.搭建主從mysql
(1)規劃主從主機
主機:10.10.54.85
從機1:10.10.54.86
從機2:10.10.54.88
(2)更改主機配置文件
[root@nan85 etc]# vim /etc/my.cnf 
log-bin=master-bin
binlog_format=mixed
server-id=1
(3)更改從機配置文件
從1
[root@nan86 ~]# vim /etc/my.cnf 
log-bin=slave-bin
binlog_format=mixed
server-id=10
從2
[root@nan88 ~]# vim /etc/my.cnf 
log-bin=slave-bin
binlog_format=mixed
server-id=11
(4)在master上建立複製用戶,並授予權限
mysql> grant replication slave on *.* to 'emp1'@'10.10.54.86' identified by 'emp1';
mysql> flush privileges;
mysql> grant replication slave on *.* to 'emp2'@'10.10.54.88' identified by 'emp2';
mysql> flush privileges;
(5)查看master上二進制日誌和position位置
mysql> show master status;
+-------------------+----------+--------------+------------------+
| File              | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+-------------------+----------+--------------+------------------+
| master-bin.000006 |      990 |              |                  |
+-------------------+----------+--------------+------------------+
(6)備份master上的數據,把備份master數據庫還原到從庫上
(7)在slave上面change master操做
從1:
mysql> change master to master_host='10.10.54.85',master_user='emp1', master_password='emp1', master_log_file='master-bin.000006',master_log_pos=990;
從2:
mysql> change master to master_host='10.10.54.85',master_user='emp2',master_password='emp2',master_log_file='master-bin.000006',master_log_pos=990;

(8)在slave上啓動slave
從1:
mysql> slave start;
從2:
mysql> slave start;

(9)查看slave狀態
   肯定slave上的I/O線程和SQL線程狀態爲YES
從1:
mysql> show slave status\G;
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes

從2:
mysql> show slave status\G;
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes

7.測試
非10.10.54.85上
telnet 10.10.54.89 80        --10.10.54.89爲VIP
telnet 10.10.54.89  3306
//查看當前連接數
# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  10.10.54.233:80 rr persistent 50
  -> 10.10.54.222:80              Route   1      0          0         
  -> 10.10.54.226:80              Route   1      0          0         
TCP  10.10.54.233:3306 rr persistent 50
  -> 10.10.54.226:3306            Route   1      1          0         
  -> 10.10.54.228:3306            Route   1      0          0
相關文章
相關標籤/搜索