Linux基礎（day61）
17.1 MySQL主從介紹
MySQL主從介紹
- MySQL主從又叫作Replication、AB複製。簡單講就是A和B兩臺機器作主從後，在A上寫數據，另一臺B也會跟着寫數據，二者數據實時同步的
- MySQL主從是基於binlog的，主上須開啓binlog才能進行主從。
- binlog，其實就是一個文件，文件裏記錄了一些日誌，文件是 二進制文件，沒法cat
- 主從過程大體有3個步驟
- 1）主將更改操做記錄到binlog裏
- 2）從將主的binlog事件(sql語句)同步到從本機上並記錄在relaylog裏
- relaylog，中文叫作 中繼日誌
- 3）從根據relaylog裏面的sql語句按順序執行
- mysql主從共有三個線程
- 主上有一個log dump線程，用來和從的I/O線程傳遞binlog
- 從上有兩個線程，其中I/O線程用來同步主的binlog並生成relaylog，另一個SQL線程用來把relaylog裏面的sql語句落地
MySQL主從原理圖
mysql主從使用場景：
- 數據備份，主機器宕機，從機器還能隨時對web提供服務
- 做爲一個從庫，讀的庫，減輕主庫的壓力，數據備份且能夠分擔主機器被調用數據時的壓力，mysql主從，是有方向性的，寫數據，必須從主機器開始；若是不依照原理會致使數據紊亂
17.2 準備工做
mysql安裝總結
- mysql主從準備工做：
- 準備兩臺機器，每臺機器安裝msyql服務，並啓動mysql服務
- mysql詳細安裝
- 首先下載二進制免編譯的包，下載到/usr/local/src/目錄下
- 解壓壓縮包
- 解壓完以後，把解壓出來的目錄放到 /usr/local/mysql/ 目錄下
- 注意點：
- 首先檢查 /usr/local/mysql/ 目錄是否存在
- 如果這個目錄存在，首先把這個目錄改個名字，或者把目錄下的內容刪除
- 而後把解壓出來的目錄放到 /usr/local/mysql/ 目錄下面
- 目錄內容應該以下
[root@hanfeng ~]# ls /usr/local/mysql bin data include man my-new.cnf README share support-files COPYING docs lib my.cnf mysql-test scripts sql-bench [root@hanfeng ~]#
- 而後切換到 /usr/local/mysql/ 目錄下，進行初始化 命令
- 初始化命令 ./scripts/mysql_install_db --user=mysql --datadir=/data/mysql
- 注意點：
- 其中的--user=mysql 須要提早建立
- 注意點：
- 初始化成功的標誌就是兩個OK，或者用 echo $? 檢查是否初始化成功
- 編輯 /etc/my.cnf 文件——>默認是自帶 my.cnf 文件的
在 /etc/my.cnf 文件中 定義 datadir=/data/mysql 定義 socket=/tmp/mysql.sock
- 拷貝啓動腳本
- 命令 cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld
- 編輯啓動腳本
vim /etc/init.d/mysqld //對如下兩行進行指定路徑 指定basedir的路徑 /usr/local/mysql 指定datadir的路徑 /data/mysql
- 以後就能夠啓動mysql了
- 命令 /etc/init.d/mysql start
- 若是啓動失敗，能夠去查看錯誤日誌
- 建議 ：
- 查看 /data/mysql 目錄下的文件，默認屬主、屬組，若是不是mysql的，啓動時會因沒法寫入數據而不能啓動mysql
- 改變屬主和屬組，命令 chomd mysql:mysql /data/mysql
- 而後就能夠嘗試啓動，命令 /etc/init.d/mysql start
- 若想開機啓動，只須要輸入命令
- 命令 chkconfig mysqld on
17.3 配置主
主從配置 - 主上操做
- 安裝mysql
- 修改my.cnf，增長server-id=130和log_bin=aminglinux1
- 修改完配置文件後，啓動或者重啓mysqld服務
- 把mysql庫備份並恢復成aming庫，做爲測試數據
- mysqldump -uroot mysql > /tmp/mysql.sql
- mysql -uroot -e 「create database aming」
- mysql -uroot aming < /tmp/mysql.sql
- 建立用做同步數據的用戶
- grant replication slave on . to 'repl'@slave_ip identified by 'password';
- flush tables with read lock;
- show master status;
主從配置 - 主上操做
- 在兩臺機器安裝並啓動mysql服務後，首先在主上進行操做
- 修改/etc/mys.cnf配置文件
- 在配置文件下[mysqld]下添加
- server-id=130 這個id能夠自定義，這裏根據ip來定義
- log_bin=hf123 打開binlog，名字自定義爲log_bin=hf123 最終以下
[root@hanfeng ~]# vim /etc/my.cnf # For advice on how to change settings please see # http://dev.mysql.com/doc/refman/5.6/en/server-configuration-defaults.html # *** DO NOT EDIT THIS FILE. It's a template which will be copied to the # *** default location during install, and will be replaced if you # *** upgrade to a newer version of MySQL. [mysqld] server_id = 130 log_bin=hf123 # Remove leading # and set to the amount of RAM for the most important data # cache in MySQL. Start at 70% of total RAM for dedicated server, else 10%. # innodb_buffer_pool_size = 128M # Remove leading # to turn on a very important data integrity option: logging # changes to the binary log between backups. # log_bin # These are commonly set, remove the # and set as required. # basedir = ..... # datadir = ..... # port = ..... # server_id = ..... # socket = ..... # Remove leading # to set options mainly useful for reporting servers. # The server defaults are faster for transactions and fast SELECTs. # Adjust sizes as needed, experiment to find the optimal values. # join_buffer_size = 128M # sort_buffer_size = 2M # read_rnd_buffer_size = 2M 保存退出
- 更改完配置文件後，須要重啓mysql
- /etc/init.d/mysqld restart
[root@hanfeng ~]# /etc/init.d/mysqld restart Shutting down MySQL.... SUCCESS! Starting MySQL.. SUCCESS! [root@hanfeng ~]#
- 這時候來/data/mysql/目錄下，會生成一些文件
- ls -lt /data/mysql/
[root@hanfeng ~]# ls -lt /data/mysql/ 總用量 110728 -rw-rw----. 1 mysql mysql 50331648 1月 19 23:35 ib_logfile0 -rw-rw----. 1 mysql mysql 12582912 1月 19 23:35 ibdata1 -rw-rw----. 1 mysql mysql 104317 1月 19 23:35 hanfeng.err -rw-rw----. 1 mysql mysql 5 1月 19 23:35 hanfeng.pid -rw-rw----. 1 mysql mysql 15 1月 19 23:35 hf123.index -rw-rw----. 1 mysql mysql 120 1月 19 23:35 hf123.000001 drwx------. 2 mysql mysql 4096 1月 19 20:58 zrlog -rw-rw----. 1 mysql mysql 56 1月 2 22:41 auto.cnf drwx------. 2 mysql mysql 4096 1月 2 22:28 mysql drwx------. 2 mysql mysql 4096 1月 2 22:28 performance_schema -rw-rw----. 1 mysql mysql 50331648 1月 2 22:28 ib_logfile1 drwx------. 2 mysql mysql 6 1月 2 22:26 test [root@hanfeng ~]#
- 其中 .index 索引頁，這個文件是必需要有的
- 其中 .000001 這個是二進制日誌文件，會持續生成二、三、4等等（這個文件是實現主從配置的根本，沒有這個文件根本沒有辦法完成主從）
- 測試，準備一個數據作演示用的
- 首先作一個備份
- mysqldump -uroot -phanfeng zrlog > /tmp/zrlog.sql
[root@hanfeng ~]# mysqldump -uroot -phanfeng zrlog > /tmp/zrlog.sql Warning: Using a password on the command line interface can be insecure. [root@hanfeng ~]#
- 而後建立一個新的庫
- mysql -uroot -phanfeng -e "create database han"
[root@hanfeng ~]# mysql -uroot -phanfeng -e "create database han" Warning: Using a password on the command line interface can be insecure. [root@hanfeng ~]#
- 建立好庫後，還須要把數據恢復一下，那也就是說作的主從，參考的對象就是 han 這個庫
- mysql -uroot -phanfeng han < /tmp/zrlog.sql
[root@hanfeng ~]# mysql -uroot -phanfeng han < /tmp/zrlog.sql Warning: Using a password on the command line interface can be insecure. [root@hanfeng ~]#
- 再來查看/data/mysql/目錄下的文件
- ls -lt /data/mysql/
[root@hanfeng ~]# ls -lt /data/mysql/ 總用量 110740 -rw-rw----. 1 mysql mysql 50331648 1月 19 23:40 ib_logfile0 -rw-rw----. 1 mysql mysql 12582912 1月 19 23:40 ibdata1 -rw-rw----. 1 mysql mysql 10337 1月 19 23:40 hf123.000001 drwx------. 2 mysql mysql 4096 1月 19 23:40 han -rw-rw----. 1 mysql mysql 104317 1月 19 23:35 hanfeng.err -rw-rw----. 1 mysql mysql 5 1月 19 23:35 hanfeng.pid -rw-rw----. 1 mysql mysql 15 1月 19 23:35 hf123.index drwx------. 2 mysql mysql 4096 1月 19 20:58 zrlog -rw-rw----. 1 mysql mysql 56 1月 2 22:41 auto.cnf drwx------. 2 mysql mysql 4096 1月 2 22:28 mysql drwx------. 2 mysql mysql 4096 1月 2 22:28 performance_schema -rw-rw----. 1 mysql mysql 50331648 1月 2 22:28 ib_logfile1 drwx------. 2 mysql mysql 6 1月 2 22:26 test [root@hanfeng ~]#
- 能看到hf123.000001二進制文件是有增長的，hf123.000001增加的大小是和zrlog這個庫的保持一致的，hf123.000001文件裏完整的記錄了數據庫的建立的庫，建立的表，以及表裏的內容全都有
- 下面建立用於主從相互同步數據的用戶
- 先進入到mysql裏面去
- mysql -uroot -phanfeng
[root@hanfeng ~]# mysql -uroot -phanfeng Warning: Using a password on the command line interface can be insecure. Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 194 Server version: 5.6.35-log MySQL Community Server (GPL) Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql>
- 建立用戶
- grant replication slave on . to 'repl'@'192.168.202.131' identified by 'hanfeng';
- 指定權限，replication slave權限
- 針對repl這個用戶
- 針對 從 的那個IP，指定來源（如果寫全部的IP會很危險）
mysql> grant replication slave on *.* to 'repl'@'192.168.202.131' identified by 'hanfeng'; Query OK, 0 rows affected (0.00 sec) mysql>
- 鎖定表，目的是不讓表繼續寫，由於一會須要作 從 機器配置，須要進行一個同步，讓兩臺機器同步，保證兩臺機器的數據一致，同步纔不會出錯
- flush tables with read lock;
mysql> flush tables with read lock; Query OK, 0 rows affected (0.00 sec) mysql>
- 查看一下binlog的文件和大小，並記住binlog的filename
- show master status;
mysql> show master status; +--------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +--------------+----------+--------------+------------------+-------------------+ | hf123.000001 | 10549 | | | | +--------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec) mysql> quit Bye
- 而後退出數據庫，作一個數據同步
- 查看/data/mysql/下有哪些庫，主上有哪些庫，一會從上也得有哪些庫，同步這些庫，就意味着這些數據都得備份過去
[root@hanfeng ~]# ls /data/mysql auto.cnf hanfeng.err hf123.000001 ibdata1 ib_logfile1 performance_schema zrlog han hanfeng.pid hf123.index ib_logfile0 mysql test [root@hanfeng ~]#
- 備份數據庫，除了mysql庫，由於mysql庫裏面有帳號密碼，從上的時候不可能把全部權限複製過去，因此mysql不須要備份
- 備份其餘的庫
[root@hanfeng ~]# mysqldump -uroot -phanfeng test > /tmp/test.sql Warning: Using a password on the command line interface can be insecure. [root@hanfeng ~]#
- 等會把/tmp/目錄下 .sql文件都拷貝到 從上 去
[root@hanfeng ~]# ls /tmp/*sql /tmp/test.sql /tmp/zrlog.sql [root@hanfeng ~]#
- 主上操做完成，接下來從上操做
17.4 配置從
主從配置 - 從上操做
- 安裝mysql
- 查看my.cnf，配置server-id=132，要求和主不同
- 修改完配置文件後，啓動或者重啓mysqld服務
- 把主上aming庫同步到從上
- 能夠先建立aming庫，而後把主上的/tmp/mysql.sql拷貝到從上，而後導入aming庫
- mysql -uroot
- stop slave；
- change master to master_host='', master_user='repl', master_password='', master_log_file='', master_log_pos=xx,
- start slave;
- 還要到主上執行 unlock tables
主從配置 - 從上操做
- 在從上機器配置
- 首先在從上安裝並啓動mysql，而後查看my.cnf，配置server-id=131，要求和主不同，在配置文件的 log_bin參數 就不須要配置的，由於只有 主上 才須要二進制日誌文件
[root@hf-01 ~]# vim /etc/my.cnf [mysqld] datadir=/data/mysql socket=/tmp/mysql.sock server-id=131 # Disabling symbolic-links is recommended to prevent assorted security risks symbolic-links=0 # Settings user and group are ignored when systemd is used. # If you need to run mysqld under a different user or group, # customize your systemd unit file for mariadb according to the # instructions in http://fedoraproject.org/wiki/Systemd [mysqld_safe] # log-error=/var/log/mariadb/mariadb.log # pid-file=/var/run/mariadb/mariadb.pid # # include all files from the config directory # # !includedir /etc/my.cnf.d join_buffer_size = 128M sort_buffer_size = 2M read_rnd_buffer_size = 2M 保存退出
- 重啓mysql服務
[root@hf-01 ~]# /etc/init.d/mysqld restart Shutting down MySQL.... SUCCESS! Starting MySQL... SUCCESS! [root@hf-01 ~]#
- 在增長 server-id 後，對於mysql 是沒有任何變化的
[root@hf-01 ~]# ls /data/mysql aria_log.00000001 hf-01.err ibdata1 localhost.localdomain.err performance_schema aria_log_control hf-01.pid ib_logfile0 multi-master.info test auto.cnf ib_buffer_pool ib_logfile1 mysql
- 把主機器上備份的 .sql 數據，拷貝到從機器上，而後作一個數據恢復
- scp 192.168.202.130:/tmp/*.sql /tmp/
- 拷貝數據失敗
- 緣由：
- 在拷貝的數據的時候，一直拷貝數據失敗，由於在主上的機器裏有開機啓動腳本，因此致使拷貝數據失敗
- 緣由：
[root@hf-01 ~]# scp 192.168.202.130:/tmp/*.sql /tmp/
root@192.168.74.129's password:
_oo0oo_
[root@hf-01 ~]#
- 解決方法：
- 將主機器的裏的開機啓動腳本關閉vi .bashrc配置文件文件中註釋掉腳本，再來拷貝數據到從機器上，會發現成功
[root@hf-01 ~]# scp 192.168.202.130:/tmp/*.sql /tmp/ The authenticity of host '192.168.202.130 (192.168.202.130)' can't be established. ECDSA key fingerprint is 25:ce:a9:96:36:88:84:ab:4f:7e:80:a3:e7:36:2c:9f. Are you sure you want to continue connecting (yes/no)? yes\ Warning: Permanently added '192.168.202.130' (ECDSA) to the list of known hosts. root@192.168.202.130's password: test.sql 100% 1258 1.2KB/s 00:00 zrlog.sql 100% 10KB 9.8KB/s 00:00 [root@hf-01 ~]#
- 進入到從上數據庫中——>由於從上沒設置密碼，因此能夠直接進去
[root@hf-01 ~]# mysql -uroot -bash: mysql: 未找到命令 [root@hf-01 ~]#
- mysql -uroot命令不存在，是由於沒有加入到PATH裏面
- 這裏作個alias別名設置，用單引號' '
[root@hf-01 ~]# alias 'mysql=/usr/local/mysql/bin/mysql' [root@hf-01 ~]# alias 'mysqldump=/usr/local/mysql/bin/mysqldump'
- 這時候就能夠進入到mysql裏面去了
[root@hf-01 ~]# mysql -uroot Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 1 Server version: 5.6.35 MySQL Community Server (GPL) Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql>
- 建立庫
- create database zrlog;
- create database test1;
mysql> create database zrlog; Query OK, 1 row affected (0.00 sec) mysql> create database test1; Query OK, 1 row affected (0.00 sec) mysql> quit Bye 退出數據庫
- 而後將數據庫作一個恢復
- mysql -uroot test < /tmp/test.sql
[root@hf-01 ~]# mysql -uroot test < /tmp/test.sql [root@hf-01 ~]# mysql -uroot zrlog < /tmp/zrlog.sql [root@hf-01 ~]#
- 保證兩邊數據一致
- 而後查看/data/mysql/目錄下的數據是否和主機器上的/data/mysql/目錄是否一致
- 開始實現主從
- 在從機器登陸到mysql
[root@hf-01 ~]# mysql -uroot Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 6 Server version: 5.6.35 MySQL Community Server (GPL) Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql>
- 而後在數據庫裏面執行命令，中止slave
- stop slave;
mysql> stop slave; Query OK, 0 rows affected, 1 warning (0.00 sec) mysql>
- 配置主機器相關配置
- change master to master_host='192.168.202.130', master_user='repl', master_password='hanfeng', master_log_file='hf123.000001', master_log_pos=10549;
- master_host='192.168.202.130'，指定主機器host
- master_user='repl'，指定主機器用戶
- master_password='hanfeng'，指定主機器密碼
- master_log_file='hanfeng1.000001'，指定binlog文件名
- master_log_pos=10549，指定binlog文件大小
- 也能夠指定主機器的port，由於在生產環境中，也會有人更改mysql的默認端口 master_port=3306
mysql> change master to master_host='192.168.202.130', master_user='repl', master_password='hanfeng', master_log_file='hf123.000001', master_log_pos=10549; Query OK, 0 rows affected, 2 warnings (0.04 sec)
- 開始slave
- start slave;
mysql> start slave; Query OK, 0 rows affected (0.01 sec) mysql>
- 這時候經過 show slave status\G 判斷主從是否配置成功
查看slave配置html
- show slave status\G
- 在G後面不須要加分號，\G自己就是一種結束符
- 看 Slave_IO_Running: Yes 是否爲yes
- 看 Slave_SQL_Running: Yes 是否爲yes
mysql> show slave status\G
*************************** 1. row ***************************
Slave_IO_State: Waiting for master to send event
Master_Host: 192.168.202.130
Master_User: repl
Master_Port: 3306
Connect_Retry: 60
Master_Log_File: hf123.000001
Read_Master_Log_Pos: 10549
Relay_Log_File: hf-01-relay-bin.000002
Relay_Log_Pos: 279
Relay_Master_Log_File: hf123.000001
Slave_IO_Running: Yes //檢查是否爲Yes
Slave_SQL_Running: Yes //檢查是否爲Yes
Replicate_Do_DB:
Replicate_Ignore_DB:
Replicate_Do_Table:
Replicate_Ignore_Table:
Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
Last_Errno: 0
Last_Error:
Skip_Counter: 0
Exec_Master_Log_Pos: 10549
Relay_Log_Space: 452
Until_Condition: None
Until_Log_File:
Until_Log_Pos: 0
Master_SSL_Allowed: No
Master_SSL_CA_File:
Master_SSL_CA_Path:
Master_SSL_Cert:
Master_SSL_Cipher:
Master_SSL_Key:
Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
Last_IO_Errno: 0
Last_IO_Error:
Last_SQL_Errno: 0
Last_SQL_Error:
Replicate_Ignore_Server_Ids:
Master_Server_Id: 130
Master_UUID: fd146e3b-efca-11e7-b3d6-000c29ff458f
Master_Info_File: /data/mysql/master.info
SQL_Delay: 0
SQL_Remaining_Delay: NULL
Slave_SQL_Running_State: Slave has read all relay log; waiting for the slave I/O thread to update it
Master_Retry_Count: 86400
Master_Bind:
Last_IO_Error_Timestamp:
Last_SQL_Error_Timestamp:
Master_SSL_Crl:
Master_SSL_Crlpath:
Retrieved_Gtid_Set:
Executed_Gtid_Set:
Auto_Position: 0
1 row in set (0.00 sec)
mysql>
- 解鎖「主」上的表（在主上機器操做）
- unlock tables;
[root@hf-01 mysql]# mysql -uroot -p Enter password: Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 15 Server version: 5.6.35-log MySQL Community Server (GPL) Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved. Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql> unlock table; Query OK, 0 rows affected (0.00 sec)
- 到這裏主從搭建就算完成了
查看主從同步是否正常
- 從上執行mysql -uroot
- show slave stauts\G
- 看是否有
- Slave_IO_Running: Yes
- Slave_SQL_Running: Yes
- 還需關注
- Seconds_Behind_Master: 0 //爲主從延遲的時間
- Last_IO_Errno: 0
- Last_IO_Error:
- Last_SQL_Errno: 0
- Last_SQL_Error:
17.5 測試主從同步
擴展
- 有的同窗，遇到主從不能正常同步，提示uuid相同的錯誤。這是由於克隆機器致使。 https://www.2cto.com/database/201412/364479.html
相關文章
- 1. day61
- 2. Linux基礎-最基礎
- 3. linux基礎第一週---linux基礎
- 4. Linux基礎-01-Linux基礎命令
- 5. Linux（一）：Linux基礎
- 6. 【Linux】Linux基礎-2
- 7. 【Linux】Linux基礎-3
- 8. linux基礎
- 9. Linux基礎（day36）
- 10. Linux基礎
- 更多相關文章...
- • Kotlin 基礎語法 - Kotlin 教程
- • Scala 基礎語法 - Scala教程
- • Kotlin學習（二）基本類型
- • ☆基於Java Instrument的Agent實現
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
相關文章
- 1. day61
- 2. Linux基礎-最基礎
- 3. linux基礎第一週---linux基礎
- 4. Linux基礎-01-Linux基礎命令
- 5. Linux（一）：Linux基礎
- 6. 【Linux】Linux基礎-2
- 7. 【Linux】Linux基礎-3
- 8. linux基礎
- 9. Linux基礎（day36）
- 10. Linux基礎