rsync遠程同步

rsync遠程同步

rsync

一款快速增量備份工具

• Remote Sync，遠程同步
• 支持本地複製，或者與其餘SSH、rsync主機同步
• 官方網站： httop://rsync.samba.org

配置rsync源

[root@localhost ~]# rpm -q rsync         //查看rsync軟件包是否存在

基本思路

• 創建rsyncd.conf配置文件、獨立的帳號文件
• 啓用rsync的--daemon模式

  配置文件rsyncd.conf

• 須要手動創建、語法相似於Samba配置
• 認證配置auth users、secrets file，不加則爲匿名

配置rsync源服務器
[root@localhost ~]#  vim /etc/rsyncd.conf
uid = nobody
gid = nobody            //匿名用戶
use chroot = yes     //禁止進入家目錄
address = 192.168.45.133
port 873
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
hosts allow = 192.168.45.0/24
dont compress = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2

[wwwroot]
path = /var/www/html        //站點同步目錄
comment = www.kgc.cn     //描述信息
read only = yes            //權限
auth users = backuper        //指定來訪用戶
secrets file = /etc/rsyncd_users.db      //密碼文件

rsync帳號文件

• 採用「用戶名：密碼」的記錄格式，每行一個用戶記錄
• 獨立的帳號數據，不宜懶於系統帳號

#設置帳號登陸密碼
[root@localhost ~]# vim /etc/rsyncd_users.db
  backuper:abc123
#修改文件權限
[root@localhost ~]# chmod 600 /etc/rsyncd_users.db

啓用rsync服務

• 經過--deamon服務獨自提供服務
• 執行kill $(cat /var/run/rsyncd.pid)關閉rsync服務

  #啓動服務
  [root@localhost ~]# rsync -deamon
  #查看文件是否啓動成功
  [root@localhost ~]# netstat -ntap | grep rsync
  tcp        0      0 192.168.45.133:873      0.0.0.0:*               LISTEN      100732/rsync

  配置網站文件

  主服務器
  [root@localhost ~]#systemctl stop firewalld.service 
  [root@localhost ~]# setenforce 0 
  [root@localhost ~]# yum install httpd -y
  [root@localhost ~]# cd /var/www/html/
  [root@localhost html]# echo "this is test web" > index.html
  [root@localhost html]# cd ..
  [root@localhost www]# chmod 777 html/

客戶機
root@localhost ~]#systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0 
[root@localhost ~]# yum install httpd -y
[root@localhost ~]# cd /var/www/
[root@localhost www]# chmod 777 html/

rsync命令的用法

經常使用選項

• -a：歸檔模式，遞歸併保留對象屬性，等同於-rlptgoD
• -v：顯示同步過程的詳細（verbose）信息
• -z：在傳遞文件時進行壓縮（compress）
• -H：保留硬連接文件
• -A： 保留ACL屬性信息
• --delete：刪除目標位置有而原始位置沒有的文件
• --checksum：根據對着的校驗和來決定是否跳過文件

  配置源的兩種方法

格式1：用戶名@主機地址::共享模塊名
格式2：rsync://用戶名@主機地址/共享模塊名

[root@localhost ~]# rsync -avz
backuper@192.168.45.132::wwwroot/root

[root@localhost ~]# rsync -avz
rsync://backuper@192.168.45.132/wwwroot/root

第一種方式
[root@localhost www]# rsync -avz backuper@192.168.45.133::wwwroot /var/www/html/
Password: 
receiving incremental file list
./
index.html

sent 83 bytes  received 172 bytes  14.57 bytes/sec
total size is 17  speedup is 0.07

第二種方式
[root@localhost html]# rm -rf index.html 
[root@localhost html]# ls
[root@localhost html]# rsync -avz rsync://backuper@192.168.45.133/wwwroot /var/www/html/
Password: 
receiving incremental file list
./
index.html

sent 83 bytes  received 172 bytes  72.86 bytes/sec
total size is 17  speedup is 0.07
[root@localhost html]# ls
index.html

rsync同步操做示例

• 下行rsync源：wwwroot共享——>myweb

  rsync源的免交互處理

• 使用 --password-file=密碼文件

#刪除剛纔同步過來的文件
[root@localhost html]# rm -rf index.html 
[root@localhost html]# ls
#建立密碼文件
[root@localhost html]# vim /etc/services.pass
abc123
[root@localhost html]#  rsync -avz --delete --password-file=/etc/services.pass backuper@192.168.45.133::wwwroot /var/www/html/
receiving incremental file list
./
index.html
sent 83 bytes  received 172 bytes  24.29 bytes/sec
total size is 17  speedup is 0.07
[root@localhost html]# 
[root@localhost html]# ls
index.html

rsync實時同步

按期同步的不足

• 執行備份的時間固定，延遲明顯，實時性差
• 當同步源長期不變化時，密集的按期任務是沒必要要的

  實時同步的優勢

• 一旦同步源出現變化，當即啓動備份
• 只要同步源無變化，則不執行備份

  inotify

  linux內核的inotify機制

• 從版本2.6.13開始提供
• 能夠監控文件系統的變更狀況，並做出通知響應
• 輔助軟件：inotify-tools
  

  rsync+inotify實時同步

  調整inotify內核參數

• max_queue_events：監控隊列大小
• max_user_instances：最多監控實例數
• max_user_watches：每一個實例最多監控文件數

  [root@localhost html]# vim /etc/sysctl.conf
  fs.inotify.max_queued_events = 16384
  fs.inotify.max_user_instances = 1024
  fs.inotify.max_user_watches = 1048576
  [root@localhost html]# sysctl -p
  fs.inotify.max_queued_events = 16384
  fs.inotify.max_user_instances = 1024
  fs.inotify.max_user_watches = 1048576

### 安裝inotify-tools輔助工具
 - inotifywait：用於持續監控，實時輸出結果
 - inotifywatch：用於短時間監控，任務完成後再除結果

```sql
#掛載軟件包
[root@localhost html]# mount.cifs //192.168.100.3/GUN /mnt
Password for root@//192.168.100.3/GUN:  
[root@localhost html]# cd /mnt
#解壓軟件包
[root@localhost mnt]# tar zxvf inotify-tools-3.14.tar.gz -C /opt
[root@localhost mnt]# cd /opt/inotify-tools-3.14/
#安裝必要軟件包+
[root@localhost inotify-tools-3.14]# yum install gcc gcc-c++ make -y
#編譯安裝
[root@localhost inotify-tools-3.14]# ./configure
[root@localhost inotify-tools-3.14]# make && make install

#監控命令
[root@localhost inotify-tools-3.14]# inotifywait -mrq -e modify,create,move,delete /var/www/html/

經過inotifywait觸發rsync同步操做

[root@localhost ~]# vim /opt/inotify_rsync.sh
#!/bin/bash
INOTIFY_CMD="inotifywait -mrq -e modify,create,attrib,move,delete  /var/www/html/"
RSYNC_CMD="rsync-azH --delete --password-file=/etc/services.pass /var/www/html/ backuper@192.168.45.130::wwwroot/"
#讀取輸出的監控記錄
$INOTIFY_CMD | while read DIRECTORY EVENT FILE           
do
# 若是rsync未在執行，則當即啓動
  if [ $(pgrep rsync | wc -l) -le 0 ];then
      $RSYNC_CMD
   fi
done