Dubbo入門到精通學習筆記（十九）：MySQL源碼編譯安裝、MySQL主從複製的配置

時間  2019-11-16
標籤 dubbo 入門 精通 學習 筆記 十九 mysql 源碼 編譯 安裝 主從 複製 配置 欄目 Dubbo 简体版
原文   原文鏈接

文章目錄

MySQL 源碼編譯安裝(CentOS-6.6+MySQL-5.6)

部署環境
操做系統:CentOS-6.6-x86_64-bin-DVD1.iso MySQL 版本:mysql-5.6.26.tar.gz 操做用戶:root
系統 IP:192.168.1.205 主機名:edu-mysql-01
配置:4 核、4G 內存html

1、服務器配置:

一、配置網絡mysql

# vi /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0
BOOTPROTO=static
NM_CONTROLLED=no
ONBOOT=yes
TYPE=Ethernet 
HWADDR=00:50:56:a1:12:53 
IPADDR=192.168.1.205 
NETMASK=255.255.255.0 
GATEWAY=192.168.1.1
DNS1=223.5.5.5
DNS2=223.6.6.6

二、設置主機名linux

# vi /etc/sysconfig/network 
NETWORKING=yes 
HOSTNAME=edu-mysql-01

三、設置 IP 與主機名的映射c++

# vi /etc/hosts
127.0.0.1 edu-mysql-01 
192.168.1.205 edu-mysql-01

四、兩臺數據庫服務器的的 selinux 都要 disable
(永久關閉 selinux，請修改/etc/selinux/config，將 SELINUX 改成 disabled)web

# vi /etc/selinux/config
SELINUX=disabled

五、重啓操做系統sql

# reboot

2、源碼安裝 MySQL5.6.26:

一、使用下面的命令檢查是否安裝有 MySQL Server: # rpm -qa | grep mysql mysql-libs-5.1.73-3.el6_5.x86_64
若是是 CentOS7 以上，請使用如下命令查看:mongodb

# rpm -qa | grep mariadb
mariadb-libs-5.5.41-2.el7_0.x86_64

(由於沒有 MySQL 服務，所以不必卸載。mysql-libs 是 MySQL 的必要包)
(若是有的話可經過下面的命令來卸載掉，rpm -e mysql //普通刪除模式 )數據庫

二、改防火牆設置，打開 3306 端口:緩存

# vi /etc/sysconfig/iptables

增長以下行:安全

## MySQL
-A INPUT -p tcp -m state --state NEW -m tcp --dport 3306 -j ACCEPT

重啓防火牆:

# service iptables restart

三、新增 mysql 用戶組:

# groupadd mysql

四、新增 mysql 用戶，並添加到 mysql 用戶組:

# useradd -r -g mysql mysql

五、新建 MySQL 執行文件目錄(後面會把編譯好的 mysql 程序安裝到這個目錄):

# mkdir -p /usr/local/mysql

(-p 參數的做用是:若是最終目錄的父目錄不存在也會一併建立)
六、新建 MySQL 數據庫數據文件目錄:

# mkdir -p /home/mysql/data
# mkdir -p /home/mysql/logs
# mkdir -p /home/mysql/temp

(注意:上面的 logs 及 temp 目錄是爲了之後將 MySQL 的數據文件與執行程序文件分離， 若是你打算設置到不一樣的路徑，注意修改對應的執行命令和數據庫初始化腳本。 正式生產環 境，建議數據目錄和日誌目錄都使用單獨的分區來掛載，不 同分區屬 於不一樣的磁 盤 或 磁 盤 組。)
七、增長 PATH 環境變量搜索路徑:

# vi /etc/profile
##在 profile 文件末尾增長兩行
# mysql env param 
PATH=/usr/local/mysql/bin:/usr/local/mysql/lib:$PATH
export PATH

使 PATH 搜索路徑當即生效:

# source /etc/profile

八、安裝編譯 MySQL 須要的依賴包:
(mysql 從 5.5 版本開始，再也不使用./configure 編譯，而是使用 cmake 編譯器，具體的 cmake 編譯參數能夠參考 mysql 官網文檔 http://dev.mysql.com/doc/refman/5.5/en/source-configuration-options.html，安裝基 本依賴包，先用 yum 安裝 cmake、automake 、autoconf ，另 MySQL 5.5.x 須要最少安裝的 包有:bison,gcc、gcc-c++、ncurses-devel):

# yum install make cmake gcc gcc-c++ bison bison-devel ncurses ncurses-devel autoconf automake

九、進入/usr/local/src 目錄，上傳 mysql-5.6.26.tar.gz 源代碼到/usr/local/src 目錄:

# cd /usr/local/src

十、開始編譯安裝 mysql-5.6.26: 解壓縮源碼包:

# tar -zxvf mysql-5.6.26.tar.gz

進入解壓縮源碼目錄:

# cd mysql-5.6.26

使用 cmake 源碼安裝 mysql(若是你打算安裝到不一樣的路徑，注意修改下面語句中 /usr/local/mysql 和/home/mysql/data 路徑!)

[root@edu-mysql-01 mysql-5.6.26]# cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \
-DDEFAULT_CHARSET=utf8 \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_MYISAM_STORAGE_ENGINE=1 \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
-DWITH_MEMORY_STORAGE_ENGINE=1 \
-DWITH_READLINE=1 \
-DENABLED_LOCAL_INFILE=1 \
-DMYSQL_DATADIR=/home/mysql/data \
-DMYSQL_USER=mysql \
-DMYSQL_TCP_PORT=3306 \
-DENABLE_DOWNLOADS=1

上面的這些複製完，回車，而後就開始 cmake 的過程，通常時間不會很長。
配置解釋:

-DCMAKE_INSTALL_PREFIX=/usr/local/mysql 設置安裝目錄 -
DMYSQL_DATADIR=/home/mysql/data 設置數據庫存放目錄 -
DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock 設置 UNIX socket 目錄 -
DMYSQL_USER=mysql 設置運行用戶
-DDEFAULT_CHARSET=utf8 設置默認字符集，默認 latin1 -
DEFAULT_COLLATION=utf8_general_ci 設置默認校對規則，默認 latin1_general_ci -
DWITH_INNOBASE_STORAGE_ENGINE=1 添加 InnoDB 引擎支持 -DENABLE_DOWNLOADS=1 自動下載可
選文件，好比自動下載谷歌的測試包 -DMYSQL_TCP_PORT=3306 設置服務器監聽端口，默認 3306
-DSYSCONFDIR=/etc 設置 my.cnf 所在目錄，默認爲安裝目錄)

執行過程當中會出現:

CMake Error: Problem with tar_extract_all(): Invalid argument
CMake Error: Problem extracting tar: /usr/local/src/mysql-5.6.26/source_downloads/gmoc k- 1.6.0.zip

解決方法:
cd mysql 目錄下面會發現有一個 source_downloads 目錄，須要解壓 unzip gmock-1.6.0.zip,然 後再從新執行上述配置過程。固然你也能夠去掉-DENABLE_DOWNLOADS=1 這個選項，不編 譯谷歌的測試包也沒有什麼問題，可是以前的某些版本會出現沒法編譯的問題.
十一、cmake 結束後開始編譯源碼，這一步時間會較長，請耐心等待:

# make

十二、安裝編譯好的程序:

# make install

(注意:若是須要重裝 mysql，在/usr/local/src/mysql-5.6.26 在執行下 make install 就能夠了， 不須要再 cmake 和 make)
1三、清除安裝臨時文件:

# make clean

1四、修改 mysql 目錄擁有者爲 mysql 用戶:

# chown -Rf mysql:mysql /usr/local/mysql
 # chown -Rf mysql:mysql /home/mysql

1五、進入 mysql 執行程序的安裝路徑:

# cd /usr/local/mysql

1六、執行初始化配置腳本，建立系統自帶的數據庫和表(注意:路徑/home/mysql/data 須要 換成你自定定義的數據庫存放路徑):

# scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/home/mysql/data Installing MySQL system tables...2015-12-13 15:21:53 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see
documentation for more details).
2015-12-13 15:21:53 0 [Note] /usr/local/mysql/bin/mysqld (mysqld 5.6.26) starting as process 17362 ...
2015-12-13 15:21:53 17362 [Note] InnoDB: Using atomics to ref count buffer pool pages 2015-12-13 15:21:53 17362 [Note] InnoDB: The InnoDB memory heap is disabled
2015-12-13 15:21:53 17362 [Note] InnoDB: Mutexes and rw_locks use GCC atomic builtins 2015-12-13 15:21:53 17362 [Note] InnoDB: Memory barrier is not used
2015-12-13 15:21:53 17362 [Note] InnoDB: Compressed tables use zlib 1.2.3
2015-12-13 15:21:53 17362 [Note] InnoDB: Using CPU crc32 instructions
2015-12-13 15:21:53 17362 [Note] InnoDB: Initializing buffer pool, size = 128.0M
2015-12-13 15:21:53 17362 [Note] InnoDB: Completed initialization of buffer pool
2015-12-13 15:21:53 17362 [Note] InnoDB: The first specified data file ./ibdata1 did not exist: a new database to be created!
2015-12-13 15:21:53 17362 [Note] InnoDB: Setting file ./ibdata1 size to 12 MB
2015-12-13 15:21:53 17362 [Note] InnoDB: Database physically writes the file full: wait... 2015-12-13 15:21:53 17362 [Note] InnoDB: Setting log file ./ib_logfile101 size to 48 MB 2015-12-13 15:21:53 17362 [Note] InnoDB: Setting log file ./ib_logfile1 size to 48 MB
2015-12-13 15:21:53 17362 [Note] InnoDB: Renaming log file ./ib_logfile101 to ./ib_logfile0 2015-12-13 15:21:53 17362 [Warning] InnoDB: New log files created, LSN=45781
2015-12-13 15:21:53 17362 [Note] InnoDB: Doublewrite buffer not found: creating new 2015-12-13 15:21:53 17362 [Note] InnoDB: Doublewrite buffer created
2015-12-13 15:21:53 17362 [Note] InnoDB: 128 rollback segment(s) are active.
2015-12-13 15:21:53 17362 [Warning] InnoDB: Creating foreign key constraint system tables. 2015-12-13 15:21:53 17362 [Note] InnoDB: Foreign key constraint system tables created 2015-12-13 15:21:53 17362 [Note] InnoDB: Creating tablespace and datafile system tables. 2015-12-13 15:21:53 17362 [Note] InnoDB: Tablespace and datafile system tables created. 2015-12-13 15:21:53 17362 [Note] InnoDB: Waiting for purge to start
2015-12-13 15:21:53 17362 [Note] InnoDB: 5.6.26 started; log sequence number 0
2015-12-13 15:21:53 17362 [Note] Binlog end
2015-12-13 15:21:53 17362 [Note] InnoDB: FTS optimize thread exiting.
2015-12-13 15:21:53 17362 [Note] InnoDB: Starting shutdown...
2015-12-13 15:21:54 17362 [Note] InnoDB: Shutdown completed; log sequence number 1625977 OK
Filling help tables...2015-12-13 15:21:54 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2015-12-13 15:21:54 0 [Note] /usr/local/mysql/bin/mysqld (mysqld 5.6.26) starting as process 17384 ...
2015-12-13 15:21:54 17384 [Note] InnoDB: Using atomics to ref count buffer pool pages 2015-12-13 15:21:54 17384 [Note] InnoDB: The InnoDB memory heap is disabled 2015-12-13 15:21:54 17384 [Note] InnoDB: Mutexes and rw_locks use GCC atomic builtins 2015-12-13 15:21:54 17384 [Note] InnoDB: Memory barrier is not used
2015-12-13 15:21:54 17384 [Note] InnoDB: Compressed tables use zlib 1.2.3
2015-12-13 15:21:54 17384 [Note] InnoDB: Using CPU crc32 instructions
2015-12-13 15:21:54 17384 [Note] InnoDB: Initializing buffer pool, size = 128.0M
2015-12-13 15:21:54 17384 [Note] InnoDB: Completed initialization of buffer pool
2015-12-13 15:21:54 17384 [Note] InnoDB: Highest supported file format is Barracuda. 2015-12-13 15:21:54 17384 [Note] InnoDB: 128 rollback segment(s) are active.
2015-12-13 15:21:54 17384 [Note] InnoDB: Waiting for purge to start
2015-12-13 15:21:54 17384 [Note] InnoDB: 5.6.26 started; log sequence number 1625977 2015-12-13 15:21:55 17384 [Note] Binlog end
2015-12-13 15:21:55 17384 [Note] InnoDB: FTS optimize thread exiting.
2015-12-13 15:21:55 17384 [Note] InnoDB: Starting shutdown...
2015-12-13 15:21:56 17384 [Note] InnoDB: Shutdown completed; log sequence number 1625987 OK
To start mysqld at boot time you have to copy support-files/mysql.server to the right place for your system
PLEASE REMEMBER TO SET A PASSWORD FOR THE MySQL root USER ! To do so, start the server, then issue the following commands:
/usr/local/mysql/bin/mysqladmin -u root password 'new-password' /usr/local/mysql/bin/mysqladmin -u root -h edu-mysql-02 password 'new-password'
Alternatively you can run: /usr/local/mysql/bin/mysql_ secure_installation
which will also give you the option of removing the test databases and anonymous user created by default. This is strongly recommended for production servers.
See the manual for more instructions. You can start the MySQL daemon with:
cd . ; /usr/local/mysql/bin/mysqld_safe &
You can test the MySQL daemon with mysql-test-run.pl
cd mysql-test ; perl mysql-test-run.pl
Please report any problems at http://bugs.mysql.com/
The latest information about MySQL is available on the web at
http://www.mysql.com
Support MySQL by buying support/licenses at http://shop.mysql.com
New default config file was created as /usr/local/mysql/my.cnf and will be used by default by the server when you start it.
You may edit this file to change server settings
WARNING: Default config file /etc/my.cnf exists on the system This file will be read by default by the MySQL server
If you do not want to use this, either remove it, or use the --defaults-file argument to mysqld_safe when starting the server

1七、初始化腳本在/usr/local/mysql/下生成了配置文件 my.cnf，須要更改該配置文件的全部者:

# ls -lah

在這裏插入圖片描述

[root@edu-mysql-01 mysql] # chown -Rf mysql:mysql /usr/local/mysql/my.cnf

1八、注意:
(1)Tips:在啓動 MySQL 服務時，會按照必定次序搜索 my.cnf，先在/etc 目錄下找，找不 到則會搜索 mysql 程序目錄下是否有 my.cnf
(2)須要注意 CentOS 6 版操做系統的最小安裝完成後，即便沒有安裝 mysql，在/etc 目錄 下也會存在一個 my.cnf 文件，建議將此文件改名爲其餘的名字，不然該文件會干擾源碼安 裝的 MySQL 的正確配置，形成沒法啓動。修改/etc/my.cnf 操做以下:
能夠:mv /etc/my.cnf /etc/my.cnf.bak
也能夠:刪除掉/etc/my.cnf 這個文件:rm /etc/my.cnf

若是你須要用於生產環境，不要急着作下面的 mysql 啓動操做。建議把上一步驟中 mysql 初
始化生成的/usr/local/mysql/my.cnf 刪除，而後把你優化好的 mysql 配置文件 my.cnf 放到/etc 下。(這是作 mysql 主從複製和 mysql 優化的經驗!)

(咱們這裏使用/etc/my.cnf)
1九、編輯/etc/my.cnf: # vi my.cnf

[client]
port = 3306
socket = /usr/local/mysql/mysql.sock
[mysqld]
character-set-server = utf8 collation-server = utf8_general_ci
skip-external-locking skip-name-resolve
user = mysql
port = 3306
basedir = /usr/local/mysql
datadir = /home/mysql/data
tmpdir = /home/mysql/temp
# server_id = .....
socket = /usr/local/mysql/mysql.sock log-error = /home/mysql/logs/mysql_error.log pid-file = /home/mysql/mysql.pid
open_files_limit = 10240
back_log = 600 max_connections=500 max_connect_errors = 6000 wait_timeout=605800
#open_tables = 600 #table_cache = 650 #opened_tables = 630
max_allowed_packet = 32M
sort_buffer_size = 4M join_buffer_size = 4M thread_cache_size = 300
query_cache_type = 1 query_cache_size = 256M query_cache_limit = 2M query_cache_min_res_unit = 16k
tmp_table_size = 256M max_heap_table_size = 256M
key_buffer_size = 256M read_buffer_size = 1M read_rnd_buffer_size = 16M bulk_insert_buffer_size = 64M
lower_case_table_names=1
default-storage-engine = INNODB
//這裏注意包括mongodb中也是，設置爲物理內存的通常到2/3
innodb_buffer_pool_size =2G
innodb_log_buffer_size = 32M innodb_log_file_size = 128M innodb_flush_method =O_DIRECT
#####################
thread_concurrency = 32
//超過兩秒的話，就把日誌輸入到下面的slow log，用來輔助作性能調優
long_query_time= 2
slow-query-log = on
slow-query-log-file =/home/mysql/logs/mysql-slow.log
  [mysqldump]
quick
max_allowed_packet = 32M
[mysqld_safe] log-error=/var/log/mysqld.log pid-file=/va r/run/mysqld/m ysq ld. pid

20、複製服務啓動腳本:

# cp /usr/local/mysql/support-files/mysql.server
/etc/init.d/mysql

2一、啓動 MySQL 服務:

# service mysql start
Starting MySQL.. SUCCESS!

(初次啓動會在/usr/local/mysql 目錄下生成 mysql.sock 文件)
2二、設置 MySQL 開機自動啓動服務:

# chkconfig mysql on

設置 MySQL 數據庫 root 用戶的本地登陸密碼(初始用戶沒有密碼):

# mysqladmin -u root password 'roncoo'

2三、登陸並修改 MySQL 用戶 root 的密碼:

# mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 2
Server version: 5.6.26-log Source distribution
Copyright (c) 2000, 2015, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
mysql>
mysql> show databases; +------------------- -+
| Database | +------------------- -+
| information_schema |
| mysql | | performance_schema | | test | +------------------- -+
4 rows in set (0.00 sec)
mysql> use mysql;
Reading table information for completion of table and column names You can turn off this feature to get a quicker startup with -A

修改 root 用戶密碼:

mysql> update user set Password = password('roncoo.com') where User='root'; Query OK, 4 rows affected (0.00 sec)
Rows matched: 5 Changed: 4 Warnings: 0
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

容許 root 遠程登陸，設置遠程登陸密碼:www.roncoo.com

mysql> use mysql;
mysql>GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'www.roncoo.com' WITH GRANT OPTION;
mysql> flush privileges;
mysql> exit;

注意:真實生產環境，應用操做不要使用 root 用戶。

從新登陸

[root@edu-mysql-01 ~]# mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 9
Server version: 5.6.26-log Source distribution
Copyright (c) 2000, 2015, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its affiliates. Other names may be trademarks of their respective owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql>

2四、運行安全設置腳本， 強烈建議生產服務器使用(可選):

[root@edu-mysql-01 ~]# /usr/local/mysql/bin/mysql_secure_installation
NOTE: RUNNING ALL PARTS OF THIS SCRIPT IS RECOMMENDED FOR ALL MySQL SERVERS IN
 PRODUCTION USE! PLEASE READ EACH STEP CAREFULLY!
 
In order to log into MySQL to secure it, we'll need the current password for the
 root user. If you've just installed MySQL, and you haven't set the root
 password yet, the password will be blank, so you should just press enter here.
  
  
Enter current password for root (enter for none): ----->此處輸入 root 密碼 OK,
 successfully used password, moving on...

Setting the root password ensures that nobody can log into the MySQL
 root user without the proper authorisation.
 
You already have a root password set, so you can safely answer 'n'.

Change the root password? [Y/n] n -----> 上已爲 root 設置了密碼，此處可輸 n ... skipping.

By default, a MySQL installation has an anonymous user, allowing anyone to log 
into MySQL without having to have a user account created for them. This is
intended only for testing, and to make the installation
go a bit smoother. You should remove them before moving into a production 
environment.

Remove anonymous users? [Y/n] Y ------> 刪除匿名用戶 ... Success!

Normally, root should only be allowed to connect from 'localhost'. This ensures
 that someone cannot guess at the root password from the network.

Disallow root login remotely? [Y/n] n -----> 通常不容許 root 遠程登陸，可添加普通用戶， 而後設置容許遠程登陸
... skipping.

By default, MySQL comes with a database named 'test' that anyone can access. 
This is also intended only for testing, and should be removed before moving into 
a production environment.

  Remove test database and access to it? [Y/n] Y - Dropping test database...
... Success!

- Removing privileges on test database...
... Success!

-----> 刪除 test 庫及相應權限
Reloading the privilege tables will ensure that all changes made so far will
 take effect immediately.
 
Reload privilege tables now? [Y/n] Y -----> 從新加載權限表使設置生效 
... Success!

All done! If you've completed all of the above steps, your MySQL 
installation should now be secure.
Thanks for using MySQL!
Cleaning up...

2五、重啓服務器，檢測 mysql 是否能開機自動啓動: [root@edu-mysql-01 ~] # reboot

MySQL主從複製的配置

環境

操做系統:CentOS-6.6-x86_64-bin-DVD1.iso
MySQL 版本:mysql-5.6.26.tar.gz
主節點 IP:192.168.1.205 主機名:edu-mysql-01
從節點 IP:192.168.1.206 主機名:edu-mysql-02
主機配置:4 核 CPU、4G 內存

依賴課程

《高可用架構篇–第 13 節–MySQL 源碼編譯安裝(CentOS-6.6+MySQL-5.6)》

MySQL 主從複製官方文檔

http://dev.mysql.com/doc/refman/5.6/en/replication.html

MySQL 主從複製的方式

MySQL5.6 開始主從複製有兩種方式:基於日誌(binlog)、基於 GTID(全局事務標示符)。 本教程主要講基於日誌(binlog)的複製。

MySQL 主從複製(也稱 A/B 複製)的原理

(1) Master將數據改變記錄到二進制日誌(binary log)中，也就是配置文件log-bin指定的文件， 這些記錄叫作二進制日誌事件(binary log events);
(2) Slave 經過 I/O 線程讀取 Master 中的 binary log events 並寫入到它的中繼日誌(relay log); (3) Slave 重作中繼日誌中的事件，把中繼日誌中的事件信息一條一條的在本地執行一次，完 成數據在本地的存儲，從而實現將改變反映到它本身的數據(數據重放)。
在這裏插入圖片描述
主數據庫的每次變動（增刪改查）都會記錄到二進制文件總
從數據庫有兩個線程，一個是io線程去讀取二進制文件，並寫入到本身的中繼日誌中，還有一個sql線程，數據重放到本身的數據庫中。


主從配置須要注意的點
(1)主從服務器操做系統版本和位數一致;
(2) Master 和 Slave 數據庫的版本要一致;
(3) Master 和 Slave 數據庫中的數據要一致;
(4) Master 開啓二進制日誌，Master 和 Slave 的 server_id 在局域網內必須惟一;

主從配置的簡要步驟

一、Master 上的配置
(1) 安裝數據庫;
(2) 修改數據庫配置文件，指明 server_id，開啓二進制日誌(log-bin);
(3) 啓動數據庫，查看當前是哪一個日誌，position 號是多少;
(4) 登陸數據庫，受權數據複製用戶(IP 地址爲從機 IP 地址，若是是雙向主從，這裏的 還須要受權本機的 IP 地址，此時本身的 IP 地址就是從 IP 地址);
(5) 備份數據庫(記得加鎖和解鎖);
(6) 傳送備份數據到 Slave 上;
(7) 啓動數據庫;

如下步驟，爲單向主從搭建成功，想搭建雙向主從須要的步驟:
(1) 登陸數據庫，指定 Master 的地址、用戶、密碼等信息(此步僅雙向主從時須要);
(2) 開啓同步，查看狀態;
二、Slave 上的配置
(1) 安裝數據庫;
(2) 修改數據庫配置文件，指明 server_id(若是是搭建雙向主從的話，也要開啓二進制 日誌 log-bin);
(3) 啓動數據庫，還原備份;
(4) 查看當前是哪一個日誌，position 號是多少(單向主今後步不須要，雙向主從須要);
(5) 指定 Master 的地址、用戶、密碼等信息;
(6) 開啓同步，查看狀態。

單向主從環境(也稱 MySQL A/B 複製)的搭建

一、Master(192.168.1.205)和 Slave(192.168.1.206)上都安裝了相同版本的數據庫(mysql- 5.6.26.tar.gz)，參考《高可用架構篇–第 13 節–MySQL 源碼編譯安裝(CentOS6.6+MySQL5.6)》。

注意:兩臺數據庫服務器的的 selinux 都要 disable(永久關閉 selinux，請修改/etc/selinux/config， 將 SELINUX 改成 disabled)

二、修改 Master 的配置文件/etc/my.cnf

[root@edu-mysql-01 ~]# vi /etc/my.cnf ## 在 [mysqld] 中增長如下配置項
## 設置 server_id，通常設置爲 IP server_id=205
## 複製過濾:須要備份的數據庫，輸出 binlog
#binlog-do-db=roncoo
## 複製過濾:不須要備份的數據庫，不輸出(mysql 庫通常不一樣步) 
binlog-ignore-db=mysql
## 開啓二進制日誌功能，能夠隨便取，最好有含義
log-bin=edu-mysql-bin
## 爲每一個 session 分配的內存，在事務過程當中用來存儲二進制日誌的緩存 binlog_cache_size=1M
## 主從複製的格式(mixed,statement,row，默認格式是 statement)
binlog_format=mixed
## 二進制日誌自動刪除/過時的天數。默認值爲 0，表示不自動刪除。 
expire_logs_days=7
## 跳過主從複製中遇到的全部錯誤或指定類型的錯誤，避免 slave 端複製中斷。 ## 如:1062 錯誤是
指一些主鍵重複，1032 錯誤是由於主從數據庫數據不一致 
slave_skip_errors=1062

(如想了解以上參數的更多詳細解析，你們能夠直接百度參數名)
2.1 複製過濾可讓你只複製服務器中的一部分數據，有兩種複製過濾: (1) 在 Master 上過濾二進制日誌中的事件;
(2) 在 Slave 上過濾中繼日誌中的事件。以下:
在這裏插入圖片描述

2.2 MySQL 對於二進制日誌 (binlog)的複製類型
(1) 基於語句的複製:在 Master 上執行的 SQL 語句，在 Slave 上執行一樣的語句。MySQL 默 認採用基於語句的複製，效率比較高。一旦發現無法精確複製時，會自動選着基於行的複製。 (2) 基於行的複製:把改變的內容複製到 Slave，而不是把命令在 Slave 上執行一遍。從 MySQL5.0 開始支持。
(3) 混合類型的複製:默認採用基於語句的複製，一旦發現基於語句的沒法精確的複製時， 就會採用基於行的複製。

三、啓動/重啓 Master 數據庫服務，登陸數據庫，建立數據同步用戶，並授予相應的權限

[root@edu-mysql-01 ~]# service mysql restart
Shutting down MySQL..[ OK ]
Starting MySQL..[ OK ]
[root@edu-mysql-01 ~]# mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection
 id is 1
Server version: 5.6.26-log Source distribution
Copyright (c) 2000, 2015, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its affiliates.
 Other names may be trademarks of their respective owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.


##建立數據同步用戶，並授予相應的權限，容許從節點是192.168.1.206，而且密碼已經幫它設置好了是roncoo.123
mysql> grant replication slave, replication client on *.* to
 'repl'@'192.168.1.206' identified by 'roncoo.123';
Query OK, 0 rows affected (0.00 sec)
## 刷新受權表信息
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)
## 查看 position 號，記下 position 號(從機上須要用到這個 position 號和如今的日誌文件
) 

mysql> show master status;

在這裏插入圖片描述
四、建立 roncoo 庫、表，並寫入必定量的數據，用於模擬現有的業務系統數據庫 create

database if not exists roncoo default charset utf8 collate utf8_general_ci;
use roncoo;
DROP TABLE IF EXISTS `edu_user`;
CREATE TABLE `edu_user` (
`Id` int(11) NOT NULL AUTO_INCREMENT,
`userName` varchar(255) NOT NULL DEFAULT '' COMMENT '用戶名', `pwd` varchar(255)
 NOT NULL DEFAULT '' COMMENT '密碼', PRIMARY KEY (`Id`)
) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8 COMMENT='用戶信息表'; INSERT
INTO `edu_user` VALUES (1,'吳水成','123456'),(2,'清風','123456'),(3,'龍
果','roncoo.com');

五、爲保證 Master 和 Slave 的數據一致，咱們採用主備份，從還原來實現初始數據一致

## 先臨時鎖表
mysql> flush tables with read lock;
Query OK, 0 rows affected (0.00 sec)

//注意這步是退出mysql執行的
## 這裏咱們實行全庫備份，在實際中，咱們可能只同步某一個庫，那也能夠只備份一個庫 
[root@edu-mysql-01 ~]# mysqldump -p3306 -uroot -p --add-drop-table roncoo > /tmp/edu-master-roncoo.sql;
Warning: Using a password on the command line interface can be insecure. Enter
 password:
 
[root@edu-mysql-01 ~]# cd /tmp
[root@edu-mysql-01 tmp]# ll
total 644
-rw-r--r-- 1 root root 644266 Dec 20 04:10 edu-master-roncoo.sql
## 注意:實際生產環境中大數據量(超 2G 數據)的備份，建議不要使用 mysqldump 進行 比分，由於會非
常慢。此時推薦使用 XtraBackup 進行備份。
## 解鎖表
mysql> unlock tables;
Query OK, 0 rows affected (0.00 sec)

將 Master 上備份的數據遠程傳送到 Slave 上，以用於 Slave 配置時恢復數據

[root@edu-mysql-01 ~]# scp /tmp/edu-master-roncoo.sql root@192.168.1.206:/tmp/
 root@192.168.1.206's password:
edu-master-roncoo.sql 					100% 629KB 629.2KB/s 00:00 
[root@edu-mysql-01 ~]#

六、接下來處理 Slave(192.168.1.206)，配置文件只需修改一項，其他配置用命令來操做

[root@edu-mysql-02 ~]# vi /etc/my.cnf
## 在 [mysqld] 中增長如下配置項
## 設置 server_id，通常設置爲 IP
server_id=206

//有時候從節點也可能成爲別人的主節點
## 複製過濾:須要備份的數據庫，輸出 binlog
#binlog-do-db=roncoo
##複製過濾:不須要備份的數據庫，不輸出(mysql 庫通常不一樣步) 
binlog-ignore-db=mysql
## 開啓二進制日誌，以備 Slave 做爲其它 Slave 的 Master 時使用 
log-bin=edu-mysql-slave1-bin
## 爲每一個 session 分配的內存，在事務過程當中用來存儲二進制日誌的緩存 
binlog_cache_size = 1M
## 主從複製的格式(mixed,statement,row，默認格式是 statement) 
binlog_format=mixed
## 二進制日誌自動刪除/過時的天數。默認值爲 0，表示不自動刪除。 
expire_logs_days=7
## 跳過主從複製中遇到的全部錯誤或指定類型的錯誤，避免 slave 端複製中斷。 
## 如:1062 錯誤是指
一些主鍵重複，1032 錯誤是由於主從數據庫數據不一致 
slave_skip_errors=1062
## relay_log 配置中繼日誌
relay_log=edu-mysql-relay-bin
## log_slave_updates 表示 slave 將複製事件寫進本身的二進制日誌 
//看下圖，由於可能從節點再做爲主節點
log_slave_updates=1
## 防止改變數據(除了特殊的線程) 
read_only=1

若是 Slave 爲其它 Slave 的 Master 時，必須設置 bin_log。在這裏，咱們開啓了二進制日誌， 並且顯式的命名(默認名稱爲 hostname，可是，若是 hostname 改變則會出現問題)。 relay_log 配置中繼日誌，log_slave_updates 表示 slave 將複製事件寫進本身的二進制日誌。 當設置 log_slave_updates 時，你可讓 slave 扮演其它 slave 的 master。此時，slave 把 SQL 線程執行的事件寫進行本身的二進制日誌(binary log)，而後，它的 slave 能夠獲取這些事件 並執行它。以下圖所示(發送複製事件到其它 Slave):
在這裏插入圖片描述

也有這種需求：須要三個，最後一個只作數據備份

七、保存後重啓 MySQL 服務，還原備份數據

[root@edu-mysql-02 ~]# service mysql restart 
Shutting down MySQL..[ OK ]
Starting MySQL..[ OK ]

Slave 上建立相同庫:

create database if not exists roncoo default charset utf8 collate utf8_general_ci; 
use roncoo;

導入數據

[root@edu-mysql-02 ~]# mysql -uroot -p roncoo < /tmp/edu-master-roncoo.sql 
Enter password:
[root@edu-mysql-02 ~]#

八、登陸 Slave 數據庫，添加相關參數
(Master 的 IP、端口、同步用戶、密碼、position 號、讀取哪一個日誌文件)

[root@edu-mysql-02 ~]# mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.6.26-log Source distribution
Copyright (c) 2000, 2015, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its affiliates.
 Other names may be trademarks of their respective owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

//經過那個用戶做爲主節點，密碼是多少192.168.1.205 repl roncoo.123 端口， 日誌文件 
mysql> change master to master_host='192.168.1.205', master_user='repl',
 master_password='roncoo.123', master_port=3306, master_log_file='edu-mysql-
 bin.000001 ' , master_log_pos=1389, master_connect_retry=30;
Query OK, 0 rows affected, 2 warnings (0.01 sec)

上面執行的命令的解釋:

master_host='192.168.1.205'	## Master 的 IP 地址
master_user='repl'	## 用於同步數據的用戶(在 Master 中受權的用戶)
master_password='roncoo.123'	## 同步數據用戶的密碼
master_port=3306	## Master 數據庫服務的端口

//注意下面兩個配置
master_log_file='edu-mysql-bin.000001' ##指定 Slave 從哪一個日誌文件開始讀複製數據(可 在
 Master 上使用 show master status 查看到日誌文件名)
//主節點數據發生變化以後，position會發生變化，從節點只須要從position的地方開始讀取
 master_log_pos=429 ## 從哪一個 POSITION 號開始讀

master_connect_retry=30 ##當從新創建主從鏈接時，若是鏈接創建失敗，間隔多久後重試。 單位爲
秒，默認設置爲 60 秒，同步延遲調優參數。
## 查看主從同步狀態
mysql> show slave status\G;
可看到 Slave_IO_State 爲空， Slave_IO_Running 和 Slave_SQL_Running 是 No，代表 Slave
 還 沒有開始複製過程。
## 開啓主從同步
mysql> start slave;
Query OK, 0 rows affected (0.00 sec) 
## 再查看主從同步狀態
mysql> show slave status\G;

在這裏插入圖片描述
主要看如下兩個參數，這兩個參數若是是 Yes 就表示主從同步正常

Slave_IO_Running: Yes
Slave_SQL_Running: Yes

由截圖中的主從同步狀態信息能夠看出，咱們配置的主從同步是正常的。
可查看 master 和 slave 上線程的狀態。在 master 上，能夠看到 slave 的 I/O 線程建立的鏈接:

Master : mysql> show processlist\G;

在這裏插入圖片描述
1.row 爲處理 slave 的 I/O 線程的鏈接。
2.row 爲處理 MySQL 客戶端鏈接線程。
3.row 爲處理本地命令行的線程。

Slave : mysql> show processlist\G;

在這裏插入圖片描述1.row 爲 I/O 線程狀態。
2.row 爲 SQL 線程狀態。
3.row 爲處理本地命令行的線程。
九、主從數據複製同步測試
(1) 在 Master 中的 roncoo 庫上變動數據的同步測試;

mysql> INSERT INTO `edu_user` VALUES (4,'同步測試 1','123456'),(5,'同步測試 2','123456');

Master 中添加完以後，登陸 Slave 中查看數據是否已同步。
(2) 在 Master 上新建一個 ron 庫

mysql> create database if not exists ron default charset utf8 collate utf8_general_ci;

在 Slave 中查看數據庫

mysql> show databases;

最終的測試結果是，在 Master 中的操做，都成功同步到了 Slave。
十、測試過程當中，若是遇到同步出錯，可在 Slave 上重置主從複製設置(選操做):

(1) mysql> reset slave;
(2) mysql> change master to master_host='192.168.1.205',
master_user='repl',
master_password='roncoo.123', master_port=3306, master_log_file='edu-mysql-bin.00000x',

master_log_pos=xx,
master_connect_retry=30;

(此時，master_log_file 和 master_log_pos 要在 Master 中用 show master status 命令查看)

注意:若是在 Slave 沒作只讀控制的狀況下，千萬不要在 Slave 中手動插入數據，那樣數據 就會不一致，主從就會斷開，就須要從新配置了。

十一、上面所搭建的是單向複製的主從，也是用的比較多的，而雙向主從其實就是 Master 和 Slave 都開啓日誌功能，而後在 Master 執行受權用戶(這裏受權的是本身做爲從服務器，也 就是這裏的 IP 地址是 Master 的 IP 地址)，而後再在 Master 上進行 chang master 操做。

MySQL 主從數據同步延遲問題的調優

基於局域網的 Master/Slave 機制在一般狀況下已經能夠知足「實時」備份的要求了。若是延 遲比較大，能夠從如下幾個因素進行排查:
(1) 網絡延遲;
(2) Master 負載太高;
(3) Slave 負載太高;
通常的作法是使用多臺 Slave 來分攤讀請求，再單獨配置一臺 Slave 只做爲備份用，不進行 其餘任何操做，就能相對最大限度地達到「實時」的要求了。

兩個能夠減小主從複製延遲的參數( 按需配置):
MySQL 能夠指定 3 個參數，用於複製線程重連主庫:–master-retry-count，–master-connect- retry，–slave-net-timeout 。其中 master-connect-retry 和 master-retry-count 須要在 Change Master 搭建主備複製時指定，而 slave-net-timeout 是一個全局變量，能夠在 MySQL 運行 時在線設置。具體的重試策略爲:備庫過了 slave-net-timeout 秒尚未收到主庫來的數據， 它就會開始第一次重試。而後每過 master-connect-retry 秒，備庫會再次嘗試重連主庫。直 到重試了 master-retry-count 次，它纔會放棄重試。若是重試的過程當中，連上了主庫，那麼 它認爲當前主庫是好的，又會開始 slave-net-timeout 秒的等待。slave-net-timeout 的默認值 是 3600 秒，master-connect-retry 默認爲 60 秒，master-retry-count 默認爲 86400 次。也 就是說，若是主庫一個小時都沒有任何數據變動發送過來，備庫纔會嘗試重連主庫。這就是 爲何在咱們模擬的場景下，一個小時後，備庫纔會重連主庫，繼續同步數據變動的緣由。 這樣的話，若是你的主庫上變動比較頻繁，能夠考慮將 slave-net-timeout 設置的小一點，避 免主庫 Binlog dump 線程終止了，沒法將最新的更新推送過來。固然 slave-net-timeout 設 置的太小也有問題，這樣會致使若是主庫的變動確實比較少的時候，備庫頻繁的從新鏈接主 庫，形成資源浪費。
slave-net-timeout=seconds
參數說明:當 Slave 從 Master 數據庫讀取 log 數據失敗後，等待多久從新創建鏈接並獲取數 據，單位爲秒，默認設置爲 3600 秒。
在作 MySQL Slave 的時候常常會遇到不少錯誤，須要根據具體緣由跨過錯誤繼續同步，但有 時候是由於網絡不穩定、網絡閃斷形成同步不正常，若是 Slave 機器很是多的狀況下，一個 一個登陸服務器去 stop slave、start slave 變得無聊並且重複。從 MySQL5.1 開始支持的解決 方案配置:

master-connect-retry=seconds 參數說明:在主服務器宕機或鏈接丟失的狀況下，從服務器線程從新嘗試鏈接主服務器以前 睡眠的秒數。若是主服務器.info 文件中的值能夠讀取則優先使用。若是未設置，默認值爲 60。 一般配置以上 2 個參數能夠減小網絡問題致使的主從數據同步延遲。 通常網絡問題的錯誤是:

[ERROR] Error reading packet from server: Lost connection to MySQL server during query (server_errno=xxxx)
[ERROR] Slave I/O thread: Failed reading log event, reconnecting to retry, log ‘edu-mysql- bin.000256’ position 23456

推薦參考連接:
http://www.it165.net/database/html/201311/4851.html http://blog.csdn.net/hguisu/article/details/7325124 http://www.woqutech.com/?p=1116 http://blog.chinaunix.net/uid-10661836-id-4116 512.html http://my.oschina.net/cimu/blog/165019 http://linuxguest.blog.51cto.com/195664/686813/ http://blog.itpub.net/29096438/viewspace-1409405/ http://blog.csdn.net/lxpbs8851/article/details/38455223 http://blog.csdn.net/seteor/article/details/17264633

相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程