mysql分庫備份腳本[轉帖]

#!/bin/bash 
#created by yangqiqi 2017-08-24 

#建立備份用戶
#grant select,lock tables,reload,super,file,show view on *.* to 'mysqlbackup'@'localhost' identified by 'my_password'; 
#grant execute on *.* to 'mysqlbackup'@'localhost' identified by 'my_password';  授予調用存儲過程的權限
##flush privileges;

USERNAME=mysqlbackup #備份的用戶名 
PASSWORD=my_password  #備份的密碼
HOST=localhost #備份主機

DATE=`date +%Y-%m-%d`  #用來作備份文件名字的一部分
OLDDATE=`date +%Y-%m-%d -d '-10 days'`  #本地保存天數  

#指定命令所用的全路徑
MYSQL=/app/mysql5.5/bin/mysql
MYSQLDUMP=/app/mysql5.5/bin/mysqldump
MYSQLADMIN=/app/mysql5.5/bin/mysqladmin

#建立備份的目錄和文件
BACKDIR=/data/backup/db
[ -d ${BACKDIR} ] || mkdir -p ${BACKDIR}
[ -d ${BACKDIR}/${DATE} ] || mkdir ${BACKDIR}/${DATE}
[ ! -d ${BACKDIR}/${OLDDATE} ] || rm -rf ${BACKDIR}/${OLDDATE} #保存10天 多餘的刪除最前邊的
#開始備份  for循環想要備份的數據庫
MYSQLDUMP_LIST=`mysql -uroot -p'123456'  -e "show databases"| grep -Evi "database|infor|perfor"`

for DBNAME in ${MYSQLDUMP_LIST} ##使用for依次羅列須要備份的數據庫 
do
  ${MYSQLDUMP} -B -F --master-data=2 --single-transaction -u${USERNAME} -p${PASSWORD} ${DBNAME} | gzip > ${BACKDIR}/${DATE}/${DBNAME}-backup-${DATE}.sql.gz 
  /bin/sleep 2
  logger "${DBNAME} has been backup successful - $DATE"
done

舊版本的備份腳本

舊的備份代碼

#!/bin/bash 
#created by qiqi 2018-5-4

####################### 用戶說明 不寫入腳本里###############

MYSQL 備份用戶權限
須要如下權限:
SELECT, RELOAD, SHOW DATABASES, LOCK TABLES, REPLICATION CLIENT, EVENT

權限列表
1.SELECT 讀取
2.SHOW DATABASES 容許訪問完整的數據庫列表
4.LOCK TABLES 容許鎖定表
5.RELOAD 容許載入和刷新服務器緩存
6.REPLICATION CLIENT 容許用戶詢問從屬服務器或主服務器的地址
7.EVENT 容許執行事務
mysql> GRANT SELECT,RELOAD,SHOW DATABASES,LOCK TABLES,EVENT,REPLICATION CLIENT  ON *.* TO 'back_user'@'192.168.0.203' IDENTIFIED BY '123456'; 
mysql> FLUSH PRIVILEGES;
######################################################################

USERNAME=mysqlbackup #備份的用戶名 
PASSWORD=xxxxx #備份的密碼
HOST=1.1.1.1 #備份主機

DATE=`date +%Y-%m-%d`  #用來作備份文件名字的一部分
OLDDATE=`date +%Y-%m-%d -d '-3 days'`  #本地保存天數  

#指定命令所用的全路徑
MYSQL=/data/mysql/bin/mysql
MYSQLDUMP=/data/mysql/bin/mysqldump
MYSQLADMIN=/data/mysql/bin/mysqladmin

#建立備份的目錄和文件
BACKDIR=/data/backup/mysqldb
[ -d ${BACKDIR} ] || mkdir -p ${BACKDIR}
[ -d ${BACKDIR}/${DATE} ] || mkdir ${BACKDIR}/${DATE}
[ ! -d ${BACKDIR}/${OLDDATE} ] || rm -rf ${BACKDIR}/${OLDDATE} #保存5天 多餘的刪除最前邊的
#開始備份  for循環想要備份的數據庫
MYSQLDUMP_LIST=$(${MYSQL} -u${USERNAME} -p${PASSWORD} -h${HOST} --socket=/data/mysql3306/mysql.sock   -e "show databases"| grep -Evi "database|infor|perfor|mysql")

for DBNAME in ${MYSQLDUMP_LIST} ##使用for依次羅列須要備份的數據庫名字
do
    $MYSQLDUMP   -u${USERNAME} -p${PASSWORD} -h${HOST} --single-transaction --master-data=2 --set-gtid-purged=off -F --triggers  --routines --events --socket=/data/mysql3306/mysql.sock  $DBNAME  | gzip > ${BACKDIR}/${DATE}/${DBNAME}-${DATE}.sql.gz 
          
 logger "${DBNAME} has been backup successful - $DATE"
done

腳本注意點：

MYSQLDUMP_LIST=`mysql -uroot -p'123456'  -e "show databases"| grep -Evi "database|infor|perfor"` 過濾掉不須要備份的數據庫，這裏須要注意，過濾完成
後拿到的庫名是本身須要備份的庫名，若是自建的庫有的也叫infor開頭或者perfor的可能會被過濾掉，按照我的狀況調整。

天天的備份樣式以下：

[root@xxx db]# ls
2017-08-25
[root@xxx db]# cd 2017-08-25/
[root@xxx 2017-08-25]# ls
mysql-backup-2017-08-25.sql.gz  test2-backup-2017-08-25.sql.gz  test-backup-2017-08-25.sql.gz
test1-backup-2017-08-25.sql.gz  test3-backup-2017-08-25.sql.gz

 logger解釋

logger 是一個shell 命令接口，能夠經過該接口使用Syslog的系統日誌模塊，還能夠從命令行直接向系統日誌文件寫入一行信息。
日誌的級別
日誌的級別分爲七級，從緊急程度由高到底：
emerg 系統已經不可用，級別爲緊急 
alert 警報，須要當即處理和解決 
crit 既將發生，得須要預防。事件就要發生 
warnig 警告 
err 錯誤信息，普通的錯誤信息 
notice 提醒信息，很重要的信息 
info 通知信息，屬於通常信息 
debug 這是調試類信息

上邊的腳本備份完畢後  就能夠在   看到每一個數據庫備份的信息  logger的做用

[root@xxx 2017-08-25]# tail -f /var/log/messages
Aug 25 09:30:06 xxx root: test has been backup successful - 2017-08-25
Aug 25 09:30:11 xxx root: test1 has been backup successful - 2017-08-25
Aug 25 09:30:16 xxx root: test2 has been backup successful - 2017-08-25
Aug 25 09:30:21 xxx root: test3 has been backup successful - 2017-08-25
Aug 25 09:40:02 xxx root: mysql has been backup successful - 2017-08-25
Aug 25 09:40:07 xxx root: test has been backup successful - 2017-08-25
Aug 25 09:40:12 xxx root: test1 has been backup successful - 2017-08-25
Aug 25 09:40:17 xxx root: test2 has been backup successful - 2017-08-25
Aug 25 09:40:22 xxx root: test3 has been backup successful - 2017-08-25

 

調用存儲過程時報了下面的錯誤
ERROR 1370 (42000): execute command denied to user  backupAccount@'localhost' for routine 'databaseName.spName'

解決方法：

grant execute on *.* to 'mysqlbackup'@'localhost' identified by 'mysql_ritto';  

 

數據庫備份完畢後，可能有 須要把備份的文件傳輸到一個專門用來放備份文件的服務器上  我習慣用rsync 

方法以下：

 

需求：

天天凌晨1點把 A服務器上/data/backup/db/下的數據備份文件放到 B服務器裏的/data/backup/db_192.168.1.11/目錄下 

不是累加 是增量更新 （--delete）

A服務器：
數據源服務器

yum install rsync

打開防火牆 關閉seLinux

 -A INPUT -p tcp -m state --state NEW -m tcp --dport 873 -j ACCEPT

B服務器：

 ssh-keygen

把公鑰文件裏的id_rsa.pub內容複製到 A服務器裏的authorized_keys 
文件中準備腳本文件  

#!/bin/bash
usr/bin/rsync -avz --delete -e  "ssh -p 4396"  root@192.168.1.11:/data/backup/db  /data/backup/db_192.168.1.11/
logger "Successful backup file transfer - $DATE"

採用的是 拉push的政策在B服務器上將須要的數據源從A服務器上拉下來