利用Galera Cluster解決主主複製單點問題

Galera Cluster

關於Galera Cluster

  Galera Cluster：集成了Galera插件的MySQL集羣，是一種新型的，數據不共享的，高度冗餘的高可用方案，目前Galera Cluster有兩個版本，分別是Percona Xtradb Cluster及MariaDB Cluster，Galera自己是具備多主特性的，即採用multi-master的集羣架構，是一個既穩健，又在數據一致性、完整性及高性能方面有出色表現的高可用解決方案

Galera Cluster特色

1. 多主架構：真正的多點讀寫的集羣，在任什麼時候候讀寫數據，都是最新的
2. 同步複製：集羣不一樣節點之間數據同步，沒有延遲，在數據庫掛掉以後，數據不會丟失
3. 併發複製：從節點APPLY數據時，支持並行執行，更好的性能
4. 故障切換：在出現數據庫故障時，因支持多點寫入，切換容易
5. 熱插拔：在服務期間，若是數據庫掛了，只要監控程序發現的夠快，不可服務時間就會很是少。在節點故障期間，節點自己對集羣的影響很是小
6. 自動節點克隆：在新增節點，或者停機維護時，增量數據或者基礎數據不須要人工手動備份提供，Galera Cluster會自動拉取在線節點數據，最終集羣會變爲一致
7. 對應用透明：集羣的維護，對應用程序是透明的

Galera Cluster工做過程

Galera Cluster場景模擬

  三個節點組成了一個集羣，與普通的主從架構不一樣，它們均可以做爲主節點，三個節點是對等的，稱爲multi-master架構，當有客戶端要寫入或者讀取數據時，鏈接哪一個實例都是同樣的，讀到的數據是相同的，寫入某一個節點以後，集羣本身會將新數據同步到其它節點上面，這種架構不共享任何數據，是一種高冗餘架構

IP地址分配

主機	IP地址	類型
CentOS7.6	192.168.36.101	Master
CentOS7.6	192.168.36.103	Master
CentOS7.6	192.168.36.104	Master

建立Galera源

[root@CentOS7 ~]#cd /etc/yum.repos.d/
[root@CentOS7 yum.repos.d]#vim galera.repo
[galera]
name=galera
baseurl=https://mirrors.tuna.tsinghua.edu.cn/mariadb/mariadb-5.5.64/yum/centos7-amd64/
gpgcheck=0

將Galera源scp至其他兩個節點

[root@CentOS7 yum.repos.d]#scp galera.repo 192.168.36.104:/etc/yum.repos.d/
root@192.168.36.104's password:
galera.repo                                                          100%  119     3.6KB/s   00:00
[root@CentOS7 yum.repos.d]#scp galera.repo 192.168.36.103:/etc/yum.repos.d/
root@192.168.36.103's password:
galera.repo                                                          100%  119    40.2KB/s   00:00

安裝MariaDB-Galera-server

[root@CentOS7 ~]#yum install MariaDB-Galera-server

修改Galera配置文件

[root@CentOS7 ~]#vim /etc/my.cnf.d/server.cnf
[galera]
# Mandatory settings
wsrep_provider=/usr/lib64/galera/libgalera_smm.so       # 模塊庫文件所在路徑
wsrep_cluster_address="gcomm://192.168.36.101,192.168.36.103,192.168.36.104"        # 集羣IP地址
binlog_format=row       # 基於行語句
#default_storage_engine=InnoDB
#innodb_autoinc_lock_mode=2
#bind-address=0.0.0.0

將Galera配置文件同步到全部機器上

[root@CentOS7 ~]#scp /etc/my.cnf.d/server.cnf 192.168.36.103:/etc/my.cnf.d/
root@192.168.36.103's password:
server.cnf                                                           100% 1111    92.4KB/s   00:00
[root@CentOS7 ~]#scp /etc/my.cnf.d/server.cnf 192.168.36.104:/etc/my.cnf.d/
root@192.168.36.104's password:
server.cnf                                                           100% 1111    42.0KB/s   00:00

啓動服務：要求先啓動一個，初始化集羣，而後再啓用其他節點（--wsrep-new-cluster啓動一個新的集羣節點）

[root@CentOS7 ~]#service mysql start --wsrep-new-cluster
Starting MariaDB.190511 10:53:55 mysqld_safe Logging to '/var/lib/mysql/CentOS7.magedu36.com.err'.
190511 10:53:55 mysqld_safe Starting mysqld daemon with databases from /var/lib/mysql
...... SUCCESS!

[root@CentOS7-1 ~]#service mysql start
Starting MariaDB.190510 10:54:29 mysqld_safe Logging to '/var/lib/mysql/CentOS7-1.err'.
190510 10:54:29 mysqld_safe Starting mysqld daemon with databases from /var/lib/mysql
...SST in progress, setting sleep higher.. SUCCESS!

[root@CentOS7-2 ~]#service mysql start
Starting MariaDB.190510 10:54:37 mysqld_safe Logging to '/var/lib/mysql/CentOS7-2.err'.
190510 10:54:37 mysqld_safe Starting mysqld daemon with databases from /var/lib/mysql
...SST in progress, setting sleep higher.... SUCCESS!

此時已經實現多主複製

安全初始化

[root@CentOS7 ~]#mysql_secure_installation
/usr/bin/mysql_secure_installation: line 393: find_mysql_client: command not found
....
Set root password? [Y/n]
New password:
Re-enter new password:
Password updated successfully!
Reloading privilege tables..
 ... Success!

Remove anonymous users? [Y/n]
 ... Success!

Disallow root login remotely? [Y/n]
 ... Success!

Remove test database and access to it? [Y/n]
 - Dropping test database...
 ... Success!
 - Removing privileges on test database...
 ... Success!

Reload privilege tables now? [Y/n]
 ... Success!

Thanks for using MariaDB!

同時建立表，模仿衝突案例

成功解決衝突問題

MySQL壓力測試

簡介

  Mysqlslap：來自於mariadb包，測試的過程默認生成一個mysqlslap的schema,生成測試表t1，查詢和插入測試數據，mysqlslap庫自動生成，若是已經存在則先刪除。用--only-print來打印實際的測試過程，整個測試完成後不會在數據庫中留下痕跡

使用格式

mysqlslap [options]

經常使用參數

  --auto-generate-sql, -a 自動生成測試表和數據，表示用mysqlslap工具本身生成的SQL腳原本測試併發壓力
  --auto-generate-sql-load-type=type 測試語句的類型。表明要測試的環境是讀操做仍是寫操做仍是二者混合的。取值包括：read，key，write，update和mixed(默認)
  --auto-generate-sql-add-auto-increment 表明對生成的表自動添加auto_increment列，從5.1.18版本開始支持
  --number-char-cols=N, -x N 自動生成的測試表中包含多少個字符類型的列，默認1
  --number-int-cols=N, -y N 自動生成的測試表中包含多少個數字類型的列，默認1
  --number-of-queries=N 總的測試查詢次數(併發客戶數×每客戶查詢次數)
  --query=name,-q 使用自定義腳本執行測試，例如能夠調用自定義的存儲過程或者sql語句來執行測試
  --create-schema 表明自定義的測試庫名稱，測試的schema
  --commint=N 多少條DML後提交一次
  --compress, -C 如服務器和客戶端都支持壓縮，則壓縮信息
  --concurrency=N, -c N 表示併發量，即模擬多少個客戶端同時執行select。可指定多個值，以逗號或者--delimiter參數指定值作爲分隔符如：--concurrency=100,200,500
  --engine=engine_name, -e engine_name 表明要測試的引擎，能夠有多個，用分隔符隔開。例如：--engines=myisam,innodb
  --iterations=N, -i N 測試執行的迭代次數，表明要在不一樣併發環境下，各自運行測試多少次
  --only-print 只打印測試語句而不實際執行。
  --detach=N 執行N條語句後斷開重連
  --debug-info, -T 打印內存和CPU的相關信息

mysqlslap示例

  單線程測試

mysqlslap -a -uroot -pmagedu

  多線程測試。使用–concurrency來模擬併發鏈接

mysqlslap -a -c 100 -uroot -pmagedu

  迭代測試。用於須要屢次執行測試獲得平均值

mysqlslap -a -i 10 -uroot -pmagedu
mysqlslap ---auto-generate-sql-add-autoincrement -a
mysqlslap -a --auto-generate-sql-load-type=read
mysqlslap -a --auto-generate-secondary-indexes=3
mysqlslap -a --auto-generate-sql-write-number=1000
mysqlslap --create-schema world -q "select count(*) from City」
mysqlslap -a -e innodb -uroot -pmagedu
mysqlslap -a --number-of-queries=10 -uroot -pmagedu

  測試同時不一樣的存儲引擎的性能進行對比

mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --engine=myisam,innodb --debug-info -uroot -pmagedu

  執行一次測試，分別50和100個併發，執行1000次總查詢

mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --debuginfo -uroot -pmagedu

  50和100個併發分別獲得一次測試結果(Benchmark)，併發數越多，執行完全部查詢的時間越長。爲了準確起見，能夠多迭代測試幾回

mysqlslap -a --concurrency=50,100 --number-of-queries 1000 --iterations=5 --debug-info -uroot -pmagedu