【MySQL】SQLAdvisor的簡單安裝使用

1、SQLAdvisor 介紹

SQLAdvisor 是由美團點評公司北京DBA團隊開發維護的 SQL 優化工具：輸入SQL，輸出索引優化建議。 它基於 MySQL 原生詞法解析，再結合 SQL 中的 where 條件以及字段選擇度、聚合條件、多表 Join 關係等最終輸出最優的索引優化建議。目前 SQLAdvisor 在公司內部大量使用，較爲成熟、穩定。
項目 GitHub 地址：https://github.com/Meituan-Di...
SQLAdvisor架構流程圖
SQLAdvisor 包含了以下的處理方式：Join 處理、where 處理、計算區分度、添加備選索引、Group 與 Order 處理、驅動表選擇、添加被驅動表備選索引、輸出建議，具體的流程圖能夠參考https://tech.meituan.com/2017...

2、SQLAdvisor 的優勢

基於 MySQL 原生詞法解析，充分保證詞法解析的性能、準肯定以及穩定性；
支持常見的 SQL(Insert/Delete/Update/Select)；
支持多表 Join 並自動邏輯選定驅動表；
支持聚合條件 Order by 和 Group by；
過濾表中已存在的索引。

3、 SQLAdvisor安裝

3.1 拉取最新代碼

#git clone https://github.com/Meituan-Dianping/SQLAdvisor.git

3.2 安裝依賴項

yum install -y cmake libaio-devel libffi-devel glib2 glib2-devel bison
yum install -y Percona-Server-server-56 Percona-Server-client-56

//設置軟鏈
cd /usr/lib64/
ls -l libperconaserverclient_r.so.18
ln -s libperconaserverclient_r.so.18 libperconaserverclient_r.so

注意

跟據glib安裝的路徑，修改SQLAdvisor/sqladvisor/CMakeLists.txt中的兩處include_directories針對glib設置的path。glib yum 安裝默認不須要修改路徑
編譯sqladvisor時依賴perconaserverclient_r, 所以須要安裝Percona-Server-shared-56。有可能須要配置軟連接,例如:
1. cd /usr/lib64/ 
2. ln -s libperconaserverclient_r.so.18 libperconaserverclient_r.so
有可能須要配置percona56 yum源:
yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm
yum -y install Percona-Server-shared-56

3.3 編譯依賴項sqlparser

1. cmake -DBUILD_CONFIG=mysql_release -DCMAKE_BUILD_TYPE=debug -DCMAKE_INSTALL_PREFIX=/usr/local/sqlparser ./
2. make && make install

注意

DCMAKE_INSTALL_PREFIX爲sqlparser庫文件和頭文件的安裝目錄，其中lib目錄包含庫文件libsqlparser.so，include目錄包含所需的全部頭文件。
DCMAKE_INSTALL_PREFIX值儘可能不要修改，後面安裝依賴這個目錄。

3.4 安裝SQLAdvisor源碼

1. cd SQLAdvisor/sqladvisor/
2. cmake -DCMAKE_BUILD_TYPE=debug ./
3. make
在本路徑下生成一個sqladvisor可執行文件，這便是咱們想要的。

4、 SQLAdvisor使用

4.1 --help輸出

# ./sqladvisor --help
Usage:
  sqladvisor [OPTION...] sqladvisor

SQL Advisor Summary

Help Options:
  -?, --help              Show help options

Application Options:
  -f, --defaults-file     sqls file
  -u, --username          username
  -p, --password          password
  -P, --port              port
  -h, --host              host
  -d, --dbname            database name
  -q, --sqls              sqls
  -v, --verbose           1:output logs 0:output nothing

4.2 命令行傳參調用

# ./sqladvisor -h xx  -P xx  -u xx -p 'xx' -d xx -q "sql" -v 1

注意：命令行傳參時，參數名與值須要用空格隔開

4.3 配置文件傳參調用

$> cat sql.cnf
[sqladvisor]
username=xx
password=xx
host=xx
port=xx
dbname=xx
sqls=sql1;sql2;sql3....

cmd: ./sqladvisor -f sql.cnf  -v 1

4.4 例子

[root@OPS-9-78 sqladvisor]# sqladvisor -u root -p 'xxxxxx' -h 192.168.9.78 -P 3400 -d test_tur -q "select * from base_test where district_code=10000" -v 1 
2020-04-22 14:16:58 63400 [Note] 第1步: 對SQL解析優化以後獲得的SQL:select `*` AS `*` from `test_tur`.`base_test` where (`district_code` = 10000) 

2020-04-22 14:16:58 63400 [Note] 第2步：開始解析where中的條件:(`district_code` = 10000) 

2020-04-22 14:16:58 63400 [Note] show index from base_test 

2020-04-22 14:16:58 63400 [Note] show table status like 'base_test' 

2020-04-22 14:16:58 63400 [Note] select count(*) from ( select `district_code` from `base_test` FORCE INDEX( PRIMARY ) order by id DESC limit 10000) `base_region` where (`district_code` = 10000)  

2020-04-22 14:16:59 63400 [Note] 第3步：表base_test的行數:47447,limit行數:10000,獲得where條件中(`district_code` = 10000)的選擇度:10000 

2020-04-22 14:16:59 63400 [Note] 第4步：開始驗證 字段district_code是否是主鍵。表名:base_test 

2020-04-22 14:16:59 63400 [Note] show index from base_test where Key_name = 'PRIMARY' and Column_name ='district_code' and Seq_in_index = 1 

2020-04-22 14:16:59 63400 [Note] 第5步：字段district_code不是主鍵。表名:base_test 

2020-04-22 14:16:59 63400 [Note] 第6步：開始驗證 字段district_code是否是主鍵。表名:base_test 

2020-04-22 14:16:59 63400 [Note] show index from base_test where Key_name = 'PRIMARY' and Column_name ='district_code' and Seq_in_index = 1 

2020-04-22 14:16:59 63400 [Note] 第7步：字段district_code不是主鍵。表名:base_test 

2020-04-22 14:16:59 63400 [Note] 第8步：開始驗證表中是否已存在相關索引。表名:base_test, 字段名:district_code, 在索引中的位置:1 

2020-04-22 14:16:59 63400 [Note] show index from base_test where Column_name ='district_code' and Seq_in_index =1 

2020-04-22 14:16:59 63400 [Note] 第9步：開始輸出表base_test索引優化建議: 

2020-04-22 14:16:59 63400 [Note] Create_Index_SQL：alter table base_test add index idx_district_code(district_code) 

2020-04-22 14:16:59 63400 [Note] 第10步: SQLAdvisor結束!