Rsync 自動同步壓縮日誌文件至備份服務器

業務場景：將全部服務器內的日誌文件以小時爲單位壓縮後保存同時清空源日誌文件。此後經過rsync + inotify 機制將壓縮文件統一備份到日誌服務器內。實現對日誌文件的統一保存和備份。
rsync 和inotify這裏就不介紹了！有興趣的能夠到官網查看。
大體服務架構圖：

1、三臺機器的IP分別爲：br/>源服務器：172.20.2.108
目標（備份）服務器：172.20.2.225
@todo:從源服務器（172.20.2.108）的/data/目錄下的全部的文件實時經過到目標服務器（172.20.2.225）的/data目錄下
源服務器下須要安裝rsync 和inotify，源服務器作爲server端，實時的向目標服務器client端發送數據。

2、安裝rsync
通常狀況下centos 6.9下都安裝了rsync，因此就沒必要安裝了，能夠用如下命令檢查一下是否已安裝：rpm -qa | grep rsync

上面顯示了個人機器上沒有安裝rsync
若是沒有安裝請往下看：
cd /opt/softdir
wget http://rsync.samba.org/ftp/rsync/src/rsync-3.0.9.tar.gz
tar xf rsync-3.0.9.tar.gz
cd rsync-3.0.9 && ./configure --prefix=/opt/rsync && make && make install
rsync安裝完畢！
3、建立同步文件所須要的密碼文件，這樣作是爲了安全。
echo "newpassword" > /etc/rsyncd.secrets
echo "redhat" > /etc/rsyncd.secrets
注：這裏的newpassword能夠實任意字符。
處於安全考慮要把此文件的權限修改爲600
chmod 600 /etc/rsyncd.secrets
4、安裝inotify
先查看服務器是否支持inotify
ll /proc/sys/fs/inotify

會有三個文件，這說明此服務器支持inotify的。

下面安裝inotify：
cd /opt/softdir
wget -c https://nchc.dl.sourceforge.net/project/inotify-tools/inotify-tools/3.13/inotify-tools-3.13.tar.gz
tar xf inotify-tools-3.13.tar.gz
cd inotify-tools-3.13 && ./configure --prefix=/opt/inotify && make && make install
5、建立rsync複製腳本，用戶shell實現，其功能就是：從源服務器（172.20.2.108）的/data/目錄下的全部文件不管是添加、修改、刪除文件，可以經過inotify監控到，並經過rsync實時同步到目標服務器（172.20.2.225）的/data下

vim  /usr/bin/rsync.sh
#!/bin/bash
host=172.20.2.225
src=/data/
des=web
user=root
/opt/inotify/bin/inotifywait -mrq --timefmt '%d/%m/%y %H:%M' --format '%T %w%f%e' -e modify,delete,create,attrib $src \
| while read files
do
/opt/rsync/bin/rsync  -zrtopg  --delete  --progress --password-file=/etc/rsyncd.secrets $src $user@$host::$des
echo "${files} was rsynced" > /var/log/rsyncd.log 2>&1
done

其中host是目標服務器的ip，src是源服務器要同步的目錄，des是認證模塊名，須要與目標服務器一致，user是創建密碼文件裏的認證用戶。
修改rsync.sh的權限
chmod +x /usr/bin/rsync.sh
到此爲止，源服務器的全部操做就完成了！下面配置目標服務器。

————————————————    我是分割線—————————————————

1、目標服務器也要安裝 rsync，安裝方式跟源服務器同樣，這裏就不在贅述了
2、創建密碼文件：
echo "root:redhat" >/etc/rsyncd.secrets
一樣要給此文件一個600的權限
chmod 600 /etc/rsyncd.secrets
注：在源服務器創建的密碼文件，只有密碼，沒有用戶名；而在目標服務器裏創建的密碼文件，用戶名與密碼都有。
3、寫rsync的配置文件
vim /etc/rsyncd.conf

uid = root
gid = root
use chroot = no
max connections = 10
strict modes = yes
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
#log format = %t %a %m %f %b # 日誌記錄格式
[web]
path = /data
comment = web file
ignore errors
read only = no
write only = no
hosts allow = 172.20.2.108
hosts deny = *
list = false
uid = root
gid = root
auth users =root
secrets file = /etc/rsyncd.secrets

4、目標服務器啓動 rsync
/opt/rsync/bin/rsync --daemon --config=/etc/rsyncd.conf
5、源服務器啓動同步：
/usr/bin/rsync.sh &
到這裏，全部的都以完成。能夠到源服務器下的/data目錄下建立、刪除文件，而後在看一下目標服務器下的/data下是出現一樣的變化。