binlog2sql閃回恢復數據

用途：

1、數據快速回滾
2、從binlog生成標準sql

使用限制：

1、必須設置binlog_format=ROW
2、binlog_row_image=full，該參數默認爲FULL
3、恢復用戶擁有的最小權限集合爲：select, super/replication client, replication slave

建議受權
　　GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO
權限說明
　　select：須要讀取server端information_schema.COLUMNS表，獲取表結構的元信息，拼接成可視化的sql語句
　　super/replication client：兩個權限均可以，須要執行'SHOW MASTER STATUS', 獲取server端的binlog列表
　　replication slave：經過BINLOG_DUMP協議獲取binlog內容的權限

一、下載安裝

git clone https://github.com/danfengcao/binlog2sql.git
wget https://bootstrap.pypa.io/get-pip.py --no-check-certificate
python get-pip.py
cd binlog2sql
pip install –r requirements.txt

二、使用說明

mysql鏈接配置
-h host：數據庫地址
-P port：數據庫端口
-u user：數據庫鏈接用戶
-p password：數據庫鏈接密碼

解析模式 --stop-never 持續解析binlog。可選。默認False，同步至執行命令時最新的binlog位置。

-K, --no-primary-key 對INSERT語句去除主鍵。可選。默認False。

-B, --flashback 生成回滾SQL，可解析大文件，不受內存限制。可選。默認False。與stop-never或no-primary-key不能同時添加。

--back-interval -B模式下，每打印一千行回滾SQL，加一句SLEEP多少秒，如不想加SLEEP，請設爲0。可選。默認1.0。

解析範圍控制 --start-file 起始解析文件，只需文件名，無需全路徑 。必須。

--start-position/--start-pos 起始解析位置。可選。默認爲start-file的起始位置。

--stop-file/--end-file 終止解析文件。可選。默認爲start-file同一個文件。若解析模式爲stop-never，此選項失效。

--stop-position/--end-pos 終止解析位置。可選。默認爲stop-file的最末位置；若解析模式爲stop-never，此選項失效。

--start-datetime 起始解析時間，格式'%Y-%m-%d %H:%M:%S'。可選。默認不過濾。

--stop-datetime 終止解析時間，格式'%Y-%m-%d %H:%M:%S'。可選。默認不過濾。

對象過濾 -d, --databases 只解析目標db的sql，多個庫用空格隔開，如-d db1 db2。可選。默認爲空。

-t, --tables 只解析目標table的sql，多張表用空格隔開，如-t tbl1 tbl2。可選。默認爲空。

--only-dml 只解析dml，忽略ddl。可選。默認TRUE。

--sql-type 只解析指定類型，支持INSERT, UPDATE, DELETE。多個類型用空格隔開，如--sql-type INSERT DELETE。可選。默認爲增刪改都解析。用了此參數但沒填任何類型，則三者都不解析。

三、優缺點
3.一、限制（對比mysqlbinlog）

mysql server必須開啓，離線模式下不能解析
參數 binlog_row_image 必須爲FULL，暫不支持MINIMAL
解析速度不如mysqlbinlog

3.二、優勢（對比mysqlbinlog）

純Python開發，安裝與使用都很簡單
自帶flashback、no-primary-key解析模式，無需再裝補丁
flashback模式下，更適合閃回實戰
解析爲標準SQL，方便理解、篩選
代碼容易改造，能夠支持更多個性化解析

四、使用參考

python binlog2sql.py -hlocalhost -P3306 -uroot -p -dowms-hh --start-file='master-bin.000011' --start-datetime='2017-12-25 11:47:51' --stop-datetime='2017-12-25 11:47:58' -B > /data/t_rollback.sql