linux定時備份mysql並同步到其它服務器

數據在任何一家公司裏面都是最核心的資產,按期備份則是爲了保證數據庫出現問題的時候可以及時回滾到最近的備份點,將損失縮小到最小html

這篇文章將會兩部分來講明:一、mysql的按期備份;二、同步到其它服務器mysql

mysql 備份

備份還原某個數據庫

備份還原linux

# 導出數據庫
/usr/bin/mysqldump -u root -ppwd database > database20160929.sql
# 導入數據庫
mysql -u root -p database < database20160929.sql

備份到壓縮文件從壓縮文件導入sql

#備份到壓縮文件
/usr/bin/mysqldump -u root -ppwd database  | gzip > database20160929.sql.gz
#從壓縮文件導入
gzip < database20160929.sql.gz | mysql -u root -p database

crontab定時備份

一、建立備份目錄shell

# root 用戶,建立備份目錄
mkdir -p /bak/mysqlbak
cd /bak/mysqldata

二、編寫運行腳本數據庫

vi  /usr/sbin/bakmysql.sh

腳本代碼:bash

#!/bin/bash
# Name:bakmysql.sh
# This is a ShellScript For Auto DB Backup and Delete old Backup
#
backupdir=/bak/mysqlbak
time=` date +%Y%m%d%H `
mysql_bin_dir/mysqldump -u root -ppwd database | gzip > $backupdir/database$time.sql.gz
#
find $backupdir -name "name_*.sql.gz" -type f -mtime +7 -exec rm {} ; > /dev/null 2>&1

#

腳本說明:服務器

  • backupdir mysql備份地址
  • root mysql用戶名
  • pwd mysql密碼
  • database 數據庫名
  • mysql_bin_dir mysql的bin路徑;
  • time=` date +%Y%m%d%H ` 也能夠寫爲time="$(date +"%Y%m%d$H")" 其中`符號是TAB鍵上面的符號,不是ENTER左邊的'符號,還有date後要有一個空格。
  • type f 表示查找普通類型的文件,f表示普通文件。
  • mtime +7 按照文件的更改時間來查找文件,+5表示文件更改時間距如今7天之前;若是是 -mmin +5 表示文件更改時間距如今5分鐘之前。
  • exec rm {} \ 表示執行一段shell命令,exec選項後面跟隨着所要執行的命令或腳本,而後是一對兒{},一個空格和一個\,最後是一個分號。
  • /dev/null 2>&1 把標準出錯重定向到標準輸出,而後扔到/DEV/NULL下面去。通俗的說,就是把全部標準輸出和標準出錯都扔到垃圾桶裏面;其中的& 表示讓該命令在後臺執行。

三、爲腳本添加執行權限ssh

# chmod +x /usr/sbin/bakmysql.sh

四、設置crontab定時執行異步

vi /etc/crontab 
#在最後一行中加入:  
00 3 * * * root /usr/sbin/bakmysql.sh
#表示天天3點00分執行備份

注:crontab配置文件格式以下:
分 時 日 月 周  命令

五、重啓crontab

/etc/rc.d/init.d/crond restart

這樣就完了定時備份並清理前7天的備份數據

同步到其它服務器

這裏使用Linux同步文件工具rsync+inotify來進行文件的同步

rsync

rsync是類unix系統下的數據鏡像備份工具——remote sync。一款快速增量備份工具 Remote Sync,遠程同步 支持本地複製,或者與其餘SSH、rsync主機同步

用法

rsync src dest

這是最簡單的用法,表示同步src,dest文件。(即,執行以後,dest的文件與src的相同,以src的爲準)

經常使用選項

  • -a: 等價於-rlptgoD,歸檔式
  • -r: 遞歸
  • -l: 複製軟件連接
  • -p: 保留權限信息
  • -t: 將src的修改時間,同步到dest
  • -g: 同步組信息(group)
  • -o: 同步擁有者信息(own)
  • -D: 保持字符與塊設備文件
  • -z: 啓用壓縮傳輸
  • -–delete:若是src沒有此文件,那麼dest也不能有,即在dest刪除src裏沒有的文件。(若是你使用這個選項,就必須搭配-r選項一塊兒)
## 將本地/bak/mysqlbak/文件同步到 遠程服務器 /bak/mysql/bak 目錄下面 排除 mysqlbak/index目錄 經過ssh端口
rsync -vzacu  /bak/mysqlbak/  root@192.168.53.86:/bak/mysqlbak   --exclude  "mysqlbak/index"   -e "ssh -p 22"
# 將遠程目錄 /bak/mysqlbak下的文件同步到本地 /bak/mysqlbak/目錄下
rsync -vzrtopg --progress --delete root@192.168.53.85:/bak/mysqlbak  /bak

啓用rsync服務器端同步遠程文件

rsycn的服務端爲服務器的文件接收端,rsycn的客戶端爲服務器的文件推進端。

rsycn的服務端/文件接收端配置

服務端須要開啓rsyncd服務

添加配置文件rsyncd.conf

vi /etc/rsyncd.conf
#如下是全局配置
log file = /var/log/rsyncd.log
pid file = /var/run/rsyncd.pid
lock file = /var/lock/rsyncd
[mysqlbak]     #模塊名,在源服務器指定這個名字
   comment = sync rsync/home      #描述信息
   path = /bak/mysqlbak      #備份目錄
   use chroot=no           #不使用chroot,不用root權限
   read only = no          #設置本地備份目錄爲讀寫權限
   uid=root          
   gid=root
   max connections=10       #客戶端最大鏈接數
   auth users = root      #指定數據同步用戶
   secrets file = /etc/rsyncd.pass          #指定數據同步用戶信息文件
   hosts allow=192.168.53.0/85     #容許鏈接的客戶端
   ignore errors = yes     #忽略出現I/O錯誤
   timeout = 600

建立認證文件

vi /etc/rsyncd.pass
  ##代碼
  root:root      #格式是用戶名:密碼
  #屬主要有權限讀這個文件,不然會報沒權限
  chmod 600 /etc/rsyncd.pass

修改/etc/xinetd.d/rsync文件,disable 改成 no

service rsync
{
        disable = no
        socket_type     = stream
        wait            = no
        user            = root
        server          = /usr/bin/rsync
        server_args     = --daemon
        log_on_failure  += USERID
}

啓動服務端

rsync --daemon --config=/etc/rsyncd.conf

rsycn的客戶端/文件發送端配置

客戶端配置簡單 只須要配置密碼既可

vi /etc/rsync_client.pwd
  ##代碼
  root    #只須要填寫rsync服務的密碼
  #屬主要有權限讀這個文件,不然會報沒權限
  chmod 600 /etc/rsync_client.pwd

客戶端同步測試

/usr/bin/rsync -auvrtzopgP --progress --password-file=/etc/rsync_client.pwd /bak/mysqlbak/ root@192.168.53.86::mysqlbak

rsync只是一次性同步,若是須要實時同步就須要引入另外一個工具了

inotify

Inotify 是一種強大的、細粒度的、異步的文件系統事件監控機制,linux內核從2.6.13起,加入了Inotify支持,經過Inotify能夠監控文件系統中添加、刪除,修改、移動等各類細微事件,利用這個內核接口,第三方軟件就能夠監控文件系統下文件的各類變化狀況,而inotify-tools就是這樣的一個第三方軟件。

Inotify只須要要按照部署在同步的客戶端,當監控的文件有變化觸動 rsync腳原本同步

安裝

yum install inotify-tools

配置監控的文件路徑

vi /etc/inotify_exclude.lst
#代碼
/bak/mysqlbak #監控目錄
@/bak/log #排除監控目錄

rsync排除監控文件目錄

vi /etc/rsyncd.d/rsync_exclude.lst
#代碼
src/*.html*
src/js/
src/2014/20140[1-9]/

客戶端同步到遠程的腳本rsync.sh

#rsync auto sync script with inotify
#variables
current_date=$(date +%Y%m%d_%H%M%S)
source_path=/bak/mysqlbak/
log_file=/var/log/rsync_client.log
#rsync
rsync_server=192.168.53.86
rsync_user=root
rsync_pwd=/etc/rsync_client.pwd
rsync_module=mysqlbak
INOTIFY_EXCLUDE='(.*/*\.log|.*/*\.swp)$|^/tmp/src/mail/(2014|20.*/.*che.*)'
RSYNC_EXCLUDE='/bak/rsync_exclude.lst'
#rsync client pwd check
if [ ! -e ${rsync_pwd} ];then
    echo -e "rsync client passwod file ${rsync_pwd} does not exist!"
    exit 0
fi
#inotify_function
inotify_fun(){
    /usr/bin/inotifywait -mrq --timefmt '%Y/%m/%d-%H:%M:%S' --format '%T %w %f' \
          --exclude ${INOTIFY_EXCLUDE}  -e modify,delete,create,move,attrib ${source_path} \
          | while read file
      do
          /usr/bin/rsync -auvrtzopgP --exclude-from=${RSYNC_EXCLUDE} --progress --bwlimit=200 --password-file=${rsync_pwd} ${source_path} ${rsync_user}@${rsync_server}::${rsync_module} 
      done
}
#inotify log
inotify_fun >> ${log_file} 2>&1 &

給腳本執行權限,執行後就能夠了

chmod 777 rsync.sh
./rsync.sh

參考:

Linux下同步工具inotify+rsync使用詳解


做者:純潔的微笑
出處:http://www.ityouknow.com/
版權全部,歡迎保留原文連接進行轉載 :)

相關文章
相關標籤/搜索