linux系統中rsync+inotify實現服務器之間文件實時同步

最近須要對服務器上的文件實施動態備份，我又不想每次都手動來進行備份，在網上找了挺多資料，發現使用rsync就能夠實現，若是想要實現實時同步，還可使用rsync+inotify組合，本文就是以組合方式來完成的。

 

先介紹一下rsync與inotify。

一、rsync

 與傳統的cp、tar備份方式相比，rsync具備安全性高、備份迅速、支持增量備份等優勢，經過rsync能夠解決對實時性要求不高的數據備份需求，例如按期的備份文件服務器數據到遠端服務器，對本地磁盤按期作數據鏡像等。
隨着應用系統規模的不斷擴大，對數據的安全性和可靠性也提出的更好的要求，rsync在高端業務系統中也逐漸暴露出了不少不足，首先，rsync同步數據時，須要掃描全部文件後進行比對，進行差量傳輸。若是文件數量達到了百萬甚至千萬量級，掃描全部文件將是很是耗時的。並且正在發生變化的每每是其中不多的一部分，這是很是低效的方式。其次，rsync不能實時的去監測、同步數據，雖然它能夠經過linux守護進程的方式進行觸發同步，可是兩次觸發動做必定會有時間差，這樣就致使了服務端和客戶端數據可能出現不一致，沒法在應用故障時徹底的恢復數據。基於以上緣由，rsync+inotify組合出現了！

二、inotify
 Inotify 是一種強大的、細粒度的、異步的文件系統事件監控機制，linux內核從2.6.13起，加入了Inotify支持，經過Inotify能夠監控文件系統中添加、刪除，修改、移動等各類細微事件，利用這個內核接口，第三方軟件就能夠監控文件系統下文件的各類變化狀況，而inotify-tools就是這樣的一個第三方軟件。
在上面章節中，咱們講到，rsync能夠實現觸發式的文件同步，可是經過crontab守護進程方式進行觸發，同步的數據和實際數據會有差別，而inotify能夠監控文件系統的各類變化，當文件有任何變更時，就觸發rsync同步，這樣恰好解決了同步數據的實時性問題。
具體你們能夠參照http://www.ibm.com/developerworks/cn/linux/l-ubuntu-inotify/index.html來進行學習。

 

接下面咱們來開始進行rsync與inotify的安裝、配置、測試。

下面是2個服務器的結構，分別爲主機名、ip、同步的目錄，並將2臺服務器均是CentOS 6.5發行版本。

Host	IP	Docoment
Server	192.168.1.21	/tmp
Client	192.168.1.22	/tmp

 

 

 

 

1、主服務器（Server）

其中主服務器須要安裝rsync與inotify，主服務器做爲server，向備份服務器client傳輸文件

一、安裝rsync

該版本的已安裝rsync，若是沒有，可以使用yum安裝(也可使用源碼安裝，這裏就很少作介紹了)：

#安裝rsync和xinetd，並建立目錄：
yum install rsync xinetd

#配置xinetd：
vi /etc/xinetd.d/rsync
#disable = yes修改成
disable = no

啓動xinetd服務：
service xinetd start

 

二、創建密碼認證文件

代碼以下:

 

[root@Server ]# echo "rsync-pwd" >/etc/rsync.passwd 
#其中rsync-pwd能夠本身設置密碼，rsync.passwd名字也能夠本身設置

[root@Server]# chmod 600 /etc/rsync.passwd 
#不管是爲了安全，仍是爲了不出現如下錯誤，密碼文件都須要給600權限

 

三、安裝inotify

[root@Server]# cd /usr/src/ 
[root@Server src]# wget http://cloud.github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz 
[root@Server src]# tar zxvf inotify-tools-3.14.tar.gz 
[root@Server src]# cd inotify-tools-3.14 
[root@Server inotify-tools-3.14]# ./configure --prefix=/usr/local/inotify 
[root@Server inotify-tools-3.14]# make 
[root@Server inotify-tools-3.14]# make install

 

四、建立rsync複製腳本

此項功能主要是將server端的目錄/tmp裏的內容，若是修改了（不管是添加、修改、刪除文件）可以經過inotify監控到，並經過rsync實時的同步給client的/tmp裏，下面是經過shell腳本實現的。

#!/bin/bash 
host=192.168.1.22
src=/tmp/     
des=web 
user=webuser 
/usr/local/inotify/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f%e' -e modify,delete,create,attrib $src \ 
| while read files 
do 
/usr/bin/rsync -vzrtopg --delete --progress --password-file=/usr/local/rsync/rsync.passwd $src $user@$host::$des 
echo "${files} was rsynced" >>/tmp/rsync.log 2>&1 
done

 

注意：建議各位吧rsync的日誌放到其餘的目錄下（非備份目錄）。
其中host是client的ip，src是server端要實時監控的目錄，des是認證的模塊名，須要與client一致，user是創建密碼文件裏的認證用戶。
把這個腳本命名爲rsync.sh，放到監控的目錄裏，好比個人就放到/tmp下面，並給予764權限

[root@Server tmp]# chmod 764 rsync.sh

 

而後運行這個腳本

[root@Server tmp]# sh /tmp/rsync.sh &

 

請記住，只有在備份服務器client端的rsync安裝並啓動rsync以後，在啓動rsync.sh腳本，不然有時候會滿屏出現：

rsync: failed to connect to 192.168.1.22: Connection refused (111)  
rsync error: error in socket IO (code 10) at clientserver.c(107) [sender=2.6.8] 

咱們還能夠把rsync.sh腳本加入到開機啓動項裏

[root@Server tmp]# echo "/tmp/rsync.sh" >> /etc/rc.local

 

 

2、備份服務器（Client）

一、安裝rsync（備份服務器只安裝rsync）

#安裝rsync和xinetd，並建立目錄：
yum install rsync xinetd

#配置xinetd：
vi /etc/xinetd.d/rsync
#disable = yes修改成
disable = no

啓動xinetd服務：
service xinetd start

 

二、創建用戶與密碼認證文件

[root@Client]# echo "webuser:rsync-pwd" > /etc/rsync.passwd
#請記住，在server端創建的密碼文件，只有密碼，沒有用戶名；而在備份服務端client裏創建的密碼文件，用戶名與密碼都有。

[root@Client]# chmod 600 /etc/rsync.passwd 
#須要給密碼文件600權限

 

三、創建rsync配置文件

vim /etc/rsyncd.conf

uid = root 
gid = root 
use chroot = no 
max connections = 10 
strict modes = yes 
pid file = /var/run/rsyncd.pid 
lock file = /var/run/rsync.lock 
log file = /var/log/rsyncd.log 
[web] 
path = /tmp/ 
comment = web file 
ignore errors 
read only = no 
write only = no 
hosts allow = 192.168.10.220 
hosts deny = * 
list = false 
uid = root 
gid = root 
auth users = webuser 
secrets file = /usr/local/rsync/rsync.passwd

其中web是server服務端裏的認證模塊名稱，須要與主服務器裏的一致，以上的配置個人本身服務器裏的配置，以供參考。

 

四、啓動rsync

service xinetd start
chkconfig xinetd on   #設置開機自啓動

 

 

3、測試

如今rsync與inotify在server端安裝完成，rsync在備份服務器client端也安裝完成。接下來就能夠來測試一下：

在server裏建立個test-rsync文件，看看client是否能收到

[root@Server tmp]# touch test-rsync

再看client端是否有test-rsync文件，同時client端的tmp目錄文件是否與server端的文件徹底一致。若是一致，則表示已經設置成功。