Mysql大數據備份及恢復

<p>【引自攀巖人生的博客】MySQL備份通常採起全庫備份、日誌備份;MySQL出現故障後可使用全備份和日誌備份將數據恢復到最後一個二進制日誌備份前的任意位置或時間;mysql的二進制日誌記錄着該數據庫的全部增刪改的操做日誌還包括了這些操做的執行時間</p>

Binlog的用途:主從同步、恢復數據庫mysql

使用binlog工具有份sql

查看binlog是否開啓,由於默認是關閉的數據庫

從上圖可知off爲關閉狀態,通常logbin爲只讀,在/etc/my.cnf下開啓工具

重啓數據庫post

重啓後在目錄下查看是否生成bin日誌,黃色表示爲日誌測試

建立數據庫,表,數據spa

建立表的時候 auto_increment爲自增3d

從新開始一個新的日誌文件日誌

flush logs; #從新生成新的二進制文件code

delete from tb1 where id=2; #刪除id列中的序列號爲2的數據方便測試

insert into tb1(name) values('tom'); #建立一個新的數據名爲tom

查看數據

查看mysql上的二進制文件日誌

查看二進制日誌事件

  
  
  
  
  1. mysql> show binlog events; 
  2.  
  3. +------------------+------+----------------+-----------+-------------+-----------------------------------------------------------------------------------+ 
  4.  
  5. | Log_name         | Pos  | Event_type     | Server_id | End_log_pos | Info                                                                              | 
  6.  
  7. +------------------+------+----------------+-----------+-------------+-----------------------------------------------------------------------------------+ 
  8.  
  9. | mysql-bin.000001 |    4 | Format_desc    |         1 |         123 | Server ver: 5.7.13-log, Binlog ver: 4                                             | 
  10.  
  11. | mysql-bin.000001 |  123 | Previous_gtids |         1 |         154 |                                                                                   | 
  12.  
  13. | mysql-bin.000001 |  154 | Anonymous_Gtid |         1 |         219 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                              | 
  14.  
  15. | mysql-bin.000001 |  219 | Query          |         1 |         316 | create database test1                                                             | 
  16.  
  17. | mysql-bin.000001 |  316 | Anonymous_Gtid |         1 |         381 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                              | 
  18.  
  19. | mysql-bin.000001 |  381 | Query          |         1 |         525 | use `test1`; create table tb1(id int primary key auto_increment,name varchar(20)) | 
  20.  
  21. | mysql-bin.000001 |  525 | Anonymous_Gtid |         1 |         590 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                              | 
  22.  
  23. | mysql-bin.000001 |  590 | Query          |         1 |         663 | BEGIN                                                                             | 
  24.  
  25. | mysql-bin.000001 |  663 | Table_map      |         1 |         713 | table_id: 108 (test1.tb1)                                                         | 
  26.  
  27. | mysql-bin.000001 |  713 | Write_rows     |         1 |         758 | table_id: 108 flags: STMT_END_F                                                   | 
  28.  
  29. | mysql-bin.000001 |  758 | Xid            |         1 |         789 | COMMIT /* xid=10 */                                                               | 
  30.  
  31. | mysql-bin.000001 |  789 | Anonymous_Gtid |         1 |         854 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'                                              | 
  32.  
  33. | mysql-bin.000001 |  854 | Query          |         1 |         927 | BEGIN                                                                             | 
  34.  
  35. | mysql-bin.000001 |  927 | Table_map      |         1 |         977 | table_id: 108 (test1.tb1)                                                         | 
  36.  
  37. | mysql-bin.000001 |  977 | Write_rows     |         1 |        1026 | table_id: 108 flags: STMT_END_F                                                   | 
  38.  
  39. | mysql-bin.000001 | 1026 | Xid            |         1 |        1057 | COMMIT /* xid=11 */                                                               | 
  40.  
  41. | mysql-bin.000001 | 1057 | Rotate         |         1 |        1104 | mysql-bin.000002;pos=4          | # 此處爲日誌輪換事件,執行flush logs引發的 
  42.  
  43. +------------------+------+----------------+-----------+-------------+-----------------------------------------------------------------------------------+ 
  44.  
  45. 17 rows in set (0.00 sec)  

查看指定二進制日誌的事件(上面那個命令只能查看默認1的)

  
  
  
  
  1. mysql> show binlog events in 'mysql-bin.000002'
  2.  
  3. +------------------+-----+----------------+-----------+-------------+---------------------------------------+ 
  4.  
  5. | Log_name         | Pos | Event_type     | Server_id | End_log_pos | Info                                  | 
  6.  
  7. +------------------+-----+----------------+-----------+-------------+---------------------------------------+ 
  8.  
  9. | mysql-bin.000002 |   4 | Format_desc    |         1 |         123 | Server ver: 5.7.13-log, Binlog ver: 4 | 
  10.  
  11. | mysql-bin.000002 | 123 | Previous_gtids |         1 |         154 |                                       | 
  12.  
  13. | mysql-bin.000002 | 154 | Anonymous_Gtid |         1 |         219 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'  | 
  14.  
  15. | mysql-bin.000002 | 219 | Query          |         1 |         292 | BEGIN                                 | 
  16.  
  17. | mysql-bin.000002 | 292 | Table_map      |         1 |         342 | table_id: 108 (test1.tb1)             | 
  18.  
  19. | mysql-bin.000002 | 342 | Delete_rows    |         1 |         391 | table_id: 108 flags: STMT_END_F       | 
  20.  
  21. | mysql-bin.000002 | 391 | Xid            |         1 |         422 | COMMIT /* xid=14 */                   | 
  22.  
  23. | mysql-bin.000002 | 422 | Anonymous_Gtid |         1 |         487 | SET @@SESSION.GTID_NEXT= 'ANONYMOUS'  | 
  24.  
  25. | mysql-bin.000002 | 487 | Query          |         1 |         560 | BEGIN                                 | 
  26.  
  27. | mysql-bin.000002 | 560 | Table_map      |         1 |         610 | table_id: 108 (test1.tb1)             | 
  28.  
  29. | mysql-bin.000002 | 610 | Write_rows     |         1 |         654 | table_id: 108 flags: STMT_END_F       | 
  30.  
  31. | mysql-bin.000002 | 654 | Xid            |         1 |         685 | COMMIT /* xid=15 */                   | 
  32.  
  33. +------------------+-----+----------------+-----------+-------------+---------------------------------------+ 
  34.  
  35. 12 rows in set (0.00 sec)  

使用mysqlbinlog工具的-v(--verbose)選項,該選項會將行事件重構成被註釋掉的僞SQL語句,若是想看到更詳細的信息能夠將該選項給兩次如-vv,這樣能夠包含一些數據類型和元信息的註釋內容,如

先切換到binlog所在的目錄下

mysqlbinlog mysql-bin.000001

mysqlbinlog -v mysql-bin.000001

mysqlbinlog -vv mysql-bin.000001

-h,-P,-p,-u等,這些參數僅在指定了--read-from-remote-server後有效。

恢復導出binlog日誌

恢復完成後查看錶的數據是否完整

常見的選項有:

--start-datetime #從二進制日誌中讀取指定時間戳或者本地計算機時間以後的日誌事件

--stop-datetime #從二進制日誌中讀取指定時間戳或者本地計算機時間以前的日誌事件

--start-position #從二進制日誌中讀取指定position 事件位置做爲開始

--stop-position #從二進制日誌中讀取指定position 事件位置做爲事件截至

由於備份得時候把刪除那項跳過了,因此id爲2的zhangsan也恢復了

使用mysqldump備份恢復

它是用於備份和數據遷移的工具,通常在數據量比較小的狀況下使用如幾個G,當數據比較大的狀況下建議不使用;mysqldump能夠對單(多)個表、單(多)個數據庫及全部數據庫進行導出操做;

  
  
  
  
  1. mysqldump [options] db_name [tbl_name ...] #導出指定數據庫或單個表 
  2.  
  3. mysqldump [options] --databases db_name ... #導出多個數據庫 
  4.  
  5. mysqldump [options] --all-databases #導出全部  

備份數據庫test1

  
  
  
  
  1. mysqldump -p123456 --flush-logs test1 > /opt/test1.spl 
  2.  
  3. #備份整個數據庫,而且從新開啓一個新的binlog 
  4.  
  5. mysql -p123456 test1 </opt/test1.spl #從備份的目錄中導入  

建立數據測試mysqldump工具

查看數據

建立備份的目錄及備份數據庫和cp bin.000001二進制文件

清楚二進制00000.2以前的日誌

刪除數據測試

而後在進行備份第二個二進制文件

進行數據庫恢復

  

 

查看錶的數據是否恢復

 

上面數據已經所有恢復 但願能幫到你

相關文章
相關標籤/搜索