基於Docker實現MySQL主從複製

MySQL

前言

MySQL的主從複製是實現應用的高性能,高可用的基礎。對於數據庫讀操做較密集的應用,經過使數據庫請求負載均衡分配到不一樣MySQL服務器,可有效減輕數據庫壓力。當遇到MySQL單點故障中,也能在短期內實現故障切換。本文就MySQL的內建的複製功能進行闡述。mysql

版本

  • MySQl: 5.7.17
  • CentOS: 7.4.1708
  • Docker: 1.13.1

概述

MySQL複製數據流程:sql

  1. 主庫在數據更新提交事務以前,將事件異步記錄到binlog二進制日誌文件中,日誌記錄完成後存儲引擎提交本次事務
  2. 從庫啓動一個I/O線程與主庫創建鏈接,用來請求主庫中要更新的binlog。這時主庫建立的binlog dump線程,這是二進制轉儲線程,若是有新更新的事件,就通知I/O線程;當該線程轉儲二進制日誌完成,沒有新的日誌時,該線程進入sleep狀態。
  3. 從庫的I/O線程接收到新的事件日誌後,保存到本身的relay log(中繼日誌)中
  4. 從庫的SQL線程讀取中繼日誌中的事件,並執行更新保存。
    主從複製流程

配置主從庫

主庫my.cnf配置

在主庫的my.cnf中打開二進制日誌,並設置服務Id。docker

log-bin = mysql-bin
server-id = 1

注意server-id必須是一個惟一的數字,必須主從不一致, 且主從庫必須設置項。數據庫

從庫my.cnf配置

log-bin = mysql-bin
server-id = 2
log-slave-updates = 1
read-only = 1

從庫也開啓log-binlog-slave-updates設置爲從庫重放中繼日誌時,記錄到本身的二進制日誌中,可讓從庫做爲其餘服務器的主庫,將二進制日誌轉發給其餘從庫,在作一主多從方案時可考慮該種方案。安全

Dockerfile構建MySQL鏡像

構建所需文件

這裏masterslave文件各自保存不共用,先建立文件夾 /usr/local/mysql 而後在目錄建立masterslave兩個目錄,再各自建立data文件夾
文件目錄bash

  • data 目錄用來保存數據文件的目錄
  • Dockerfile 保存Dockerfile內容
  • init.sql 初始化數據庫的SQL
  • my.cnf 數據庫配置文件,配置方式上面已提到
  • start.sh Dockerfile構建MySQL時的腳本

Dockerfile 內容

# 利用 mysql 鏡像建立新的鏡像
FROM mysql:5.7.17

ENV MYSQL_ROOT_PASSWORD ytao

COPY start.sh /mysql/start.sh
COPY my.cnf /etc/mysql/my.cnf  
COPY init.sql /mysql/init.sql

EXPOSE 3306
CMD ["sh", "/mysql/start.sh"]

這裏的masterslave都是基於同一個鏡像構建,使用的存儲引擎和其餘的組件最好是同一中,否則在複製過程當中可能會出現異常。服務器

init.sql 初始化數據

-- 建立 data_copy 數據庫
DROP DATABASE IF EXISTS `data_copy`;
CREATE DATABASE `data_copy` /*!40100 DEFAULT CHARACTER SET utf8mb4 collate utf8mb4_general_ci */;

-- 建立 person 表
USE `data_copy`;
DROP TABLE IF EXISTS `person`;
CREATE TABLE `person` (
  `id` int(32) NOT NULL,
  `name` varchar(255) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;

建立data_copy數據庫和person表。負載均衡

start.sh 腳本

#!/bin/sh
echo '啓動mysql'
service mysql start
sleep 5

echo '初始化數據庫'
mysql -uroot -pytao < /mysql/init.sql
echo '初始化完成!'
tail -f /dev/null

構建masterslave鏡像並運行容器

構建master鏡像異步

docker build -t master/mysql .

構建slave鏡像性能

docker build -t slave/mysql .

構建成功會返回 Successfuly,或經過docker images命令查看鏡像
Dockerfile構建成功

使用剛構建的鏡像來運行容器

# master 容器
docker run --name master -p 3306:3306 -v /usr/local/mysql/master/data/:/var/lib/mysql -d master/mysql

# slave 容器
docker run --name slave -p 3307:3306 -v /usr/local/mysql/slave/data/:/var/lib/mysql -d slave/mysql

指定master端口爲3306,slave端口爲3307,掛載data目錄爲保存數據的目錄。

鏈接到數據庫後驗證數據庫是否初始化成功
數據庫初始化的表

查看 log-bin 是否開啓
log-bin是否開啓

建立複製帳號

前面有提到從庫I/O線程要與主庫創建鏈接,因此須要用到帳號進行驗證。帳號除了要有鏈接權限(REPLICATION CLIENT),同時還要有複製權限(REPLICATION SLAVE)。

GRANT REPLICATION CLIENT, REPLICATION SLAVE ON *.* TO muser@'%' IDENTIFIED BY 'ytao';

這裏設置的訪問地址是開放的,實際使用過程當中安全起見必定要指定訪問地址。

從庫啓動複製

從庫鏈接到主庫,獲取到二進制日誌後重放。這裏首先要配置上面建立的帳號進行鏈接,使用命令進行相應的設置。

CHANGE MASTER TO 
MASTER_HOST = '47.107.xx.xxx',
MASTER_PORT = 3306,
MASTER_USER = 'muser',
MASTER_PASSWORD = 'ytao',
MASTER_LOG_FILE = 'mysql-bin.000006';

到這裏複製尚未啓動,須要再從庫中啓動

START SLAVE;

使用SHOW SLAVE STATUS\G;命令查看啓動後的狀況
複製啓動信息

上面標記的輸出信息Slave_IO_Running: YesSlave_SQL_Running: Yes能夠看到I/O線程和SQL線程已啓動運行中。

測試同步數據

若是在主庫中添加,更新或刪除一個數據,那麼從庫中應該也有與主庫對應的數據變化。
向主庫添加一條數據

INSERT INTO `data_copy`.`person` (`id`, `name`) VALUES ('1', 'ytao');

查詢從庫數據,數據已被同步過來。
查詢從庫數據

總結

上述是最簡單最基本的配置,可是理解上面的配置過程,就能夠根據自身狀況定製不一樣方案,實現一主多從,主主複製(主動-主動或主動-被動模式)等等來知足自身需求。
MySQL的複製雖然使用簡單方便,但也伴隨着一些問題須要咱們在使用中進行解決,好比:不能從服務器異常中止中恢復,數據同步的延遲等等,還好如今遇到的大部分問題在行業中已獲得相應的解決。對這方面感興趣的能夠去了解下如今解決這些問題的中間件實現方案。




我的博客: https://ytao.top
個人公衆號 ytao
個人公衆號

相關文章
相關標籤/搜索