mysql性能優化

時間 2019-11-26

標籤 mysql 性能優化欄目 MySQL 简体版

原文原文鏈接

MySQL 5.6相比於前代GA版本性能提高顯著，但默認緩存設置對於小型站點並不合理。經過修改my.ini文件中的performance_schema_max_table_instances參數，可以有效下降內存佔用。php

如下是5.6默認的設置html

performance_schema_max_table_instances 12500mysql

table_definition_cache 1400linux

table_open_cache 2000sql

能夠調成，或者在小點均可以。數據庫

performance_schema_max_table_instances=600緩存

table_definition_cache=400服務器

table_open_cache=256併發

performance_schema_max_table_instances函數

The maximum number of instrumented table objects 檢測的表對象的最大數目。

table_open_cache
The number of open tables for all threads. Increasing this value increases the number of file descriptors that mysqld requires.

table_open_cache指的是緩存數據文件的描述符(Linux/Unix)相關信息

這個很重要啊，以前mount個單獨的文件，數據庫一直不成功，原來是這個在做怪啊。

chcon -R -t mysqld_db_t /home/myusqldata

mysql> show variables;

1、慢查詢

mysql> show variables like '%slow%';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| log_slow_queries | ON |
| slow_launch_time | 2     |
+------------------+-------+

mysql> show global status like '%slow%';
+---------------------+-------+
| Variable_name    | Value |
+---------------------+-------+
| Slow_launch_threads | 0     |
| Slow_queries        | 4148 |
+---------------------+-------+

配置中打開了記錄慢查詢，執行時間超過2秒的即爲慢查詢，系統顯示有4148個慢查詢，你能夠分析慢查詢日誌，找出有問題的SQL語句，慢查詢時間不宜設置過長，不然意義不大，最好在5秒之內，若是你須要微秒級別的慢查詢，能夠考慮給MySQL打補丁：http://www.percona.com/docs/wiki/release:start，記得找對應的版本。
打開慢查詢日誌可能會對系統性能有一點點影響，若是你的MySQL是主－從結構，能夠考慮打開其中一臺從服務器的慢查詢日誌，這樣既能夠監控慢查詢，對系統性能影響又小。
2、鏈接數
常常會碰見」MySQL: ERROR 1040: Too manyconnections」的狀況，一種是訪問量確實很高，MySQL服務器抗不住，這個時候就要考慮增長從服務器分散讀壓力，另一種狀況是MySQL配置文件中max_connections值太小：

mysql> show variables like 'max_connections';
+-----------------+-------+
| Variable_name | Value |
+-----------------+-------+
| max_connections | 256 |
+-----------------+-------+

這臺MySQL服務器最大鏈接數是256，而後查詢一下服務器響應的最大鏈接數：

mysql> show global status like 'Max_used_connections';
+----------------------+-------+
| Variable_name | Value |
+----------------------+-------+
| Max_used_connections | 245 |
+----------------------+-------+

MySQL服務器過去的最大鏈接數是245，沒有達到服務器鏈接數上限256，應該沒有出現1040錯誤，比較理想的設置是：

Max_used_connections / max_connections * 100% ≈ 85%

最大鏈接數占上限鏈接數的85％左右，若是發現比例在10%如下，MySQL服務器鏈接數上限設置的太高了。
3、Key_buffer_size
key_buffer_size是對MyISAM表性能影響最大的一個參數，下面一臺以MyISAM爲主要存儲引擎服務器的配置：

mysql> show variables like 'key_buffer_size';
+-----------------+------------+
| Variable_name | Value |
+-----------------+------------+
| key_buffer_size | 536870912 |
+-----------------+------------+

分配了512MB內存給key_buffer_size，咱們再看一下key_buffer_size的使用狀況：

mysql> show global status like 'key_read%';
+------------------------+-------------+
| Variable_name       | Value    |
+------------------------+-------------+
| Key_read_requests    | 27813678764 |
| Key_reads              | 6798830     |
+------------------------+-------------+

一共有27813678764個索引讀取請求，有6798830個請求在內存中沒有找到直接從硬盤讀取索引，計算索引未命中緩存的機率：

key_cache_miss_rate ＝ Key_reads / Key_read_requests * 100%

比如上面的數據，key_cache_miss_rate爲0.0244%，4000個索引讀取請求才有一個直接讀硬盤，已經很BT 了，key_cache_miss_rate在0.1%如下都很好（每1000個請求有一個直接讀硬盤），若是key_cache_miss_rate在 0.01%如下的話，key_buffer_size分配的過多，能夠適當減小。
MySQL服務器還提供了key_blocks_*參數：

mysql> show global status like 'key_blocks_u%';
+------------------------+-------------+
| Variable_name       | Value    |
+------------------------+-------------+
| Key_blocks_unused    | 0           |
| Key_blocks_used        | 413543    |
+------------------------+-------------+

Key_blocks_unused 表示未使用的緩存簇(blocks)數，Key_blocks_used表示曾經用到的最大的blocks數，好比這臺服務器，全部的緩存都用到了，要麼增長key_buffer_size，要麼就是過渡索引了，把緩存佔滿了。比較理想的設置：

Key_blocks_used / (Key_blocks_unused + Key_blocks_used) * 100% ≈ 80%

4、臨時表

mysql> show global status like 'created_tmp%';
+-------------------------+---------+
| Variable_name           | Value |
+-------------------------+---------+
| Created_tmp_disk_tables | 21197 |
| Created_tmp_files    | 58    |
| Created_tmp_tables    | 1771587 |
+-------------------------+---------+

每次建立臨時表，Created_tmp_tables增長，若是是在磁盤上建立臨時表，Created_tmp_disk_tables也增長,Created_tmp_files表示MySQL服務建立的臨時文件文件數，比較理想的配置是：

Created_tmp_disk_tables / Created_tmp_tables * 100% <= 25%

好比上面的服務器Created_tmp_disk_tables / Created_tmp_tables * 100% ＝ 1.20%，應該至關好了。咱們再看一下MySQL服務器對臨時表的配置：

mysql> show variables where Variable_name in ('tmp_table_size', 'max_heap_table_size');
+---------------------+-----------+
| Variable_name | Value |
+---------------------+-----------+
| max_heap_table_size | 268435456 |
| tmp_table_size | 536870912 |
+---------------------+-----------+

只有256MB如下的臨時表才能所有放內存，超過的就會用到硬盤臨時表。
5、Open Table狀況

mysql> show global status like 'open%tables%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Open_tables | 919 |
| Opened_tables | 1951 |
+---------------+-------+

Open_tables 表示打開表的數量，Opened_tables表示打開過的表數量，若是Opened_tables數量過大，說明配置中 table_cache(5.1.3以後這個值叫作table_open_cache)值可能過小，咱們查詢一下服務器table_cache值：

mysql> show variables like 'table_cache';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| table_cache | 2048 |

+---------------+-------+

比較合適的值爲：

Open_tables / Opened_tables   * 100% >= 85%
Open_tables / table_cache * 100% <= 95%

6、進程使用狀況

mysql> show global status like 'Thread%';
+-------------------+-------+
| Variable_name     | Value |
+-------------------+-------+
| Threads_cached | 46 |
| Threads_connected | 2     |
| Threads_created | 570 |
| Threads_running | 1     |
+-------------------+-------+
如果咱們在MySQL服務器配置文件中設置了thread_cache_size，當客戶端斷開以後，服務器處理此客戶的線程將會緩存起來以響應下一個客戶而不是銷燬（前提是緩存數未達上限）。Threads_created表示建立過的線程數，若是發現Threads_created值過大的話，代表 MySQL服務器一直在建立線程，這也是比較耗資源，能夠適當增長配置文件中thread_cache_size值，查詢服務器 thread_cache_size配置：

mysql> show variables like 'thread_cache_size';
+-------------------+-------+
| Variable_name     | Value |
+-------------------+-------+
| thread_cache_size | 64 |
+-------------------+-------+
示例中的服務器仍是挺健康的。
7、查詢緩存(query cache)

mysql> show global status like 'qcache%';
+-------------------------+-----------+
| Variable_name           | Value     |
+-------------------------+-----------+
| Qcache_free_blocks    | 22756     |
| Qcache_free_memory    | 76764704   |
| Qcache_hits          | 213028692 |
| Qcache_inserts       | 208894227 |
| Qcache_lowmem_prunes | 4010916 |
| Qcache_not_cached    | 13385031   |
| Qcache_queries_in_cache | 43560     |
| Qcache_total_blocks     | 111212 |
+-------------------------+-----------+
MySQL查詢緩存變量解釋：

Qcache_free_blocks：緩存中相鄰內存塊的個數。數目大說明可能有碎片。FLUSH QUERY CACHE會對緩存中的碎片進行整理，從而獲得一個空閒塊。
Qcache_free_memory：緩存中的空閒內存。
Qcache_hits：每次查詢在緩存中命中時就增大
Qcache_inserts：每次插入一個查詢時就增大。命中次數除以插入次數就是不中比率。
Qcache_lowmem_prunes：緩存出現內存不足而且必需要進行清理以便爲更多查詢提供空間的次數。這個數字最好長時間來看；若是這個數字在不斷增加，就表示可能碎片很是嚴重，或者內存不多。（上面的 free_blocks和free_memory能夠告訴您屬於哪一種狀況）
Qcache_not_cached：不適合進行緩存的查詢的數量，一般是因爲這些查詢不是 SELECT 語句或者用了now()之類的函數。
Qcache_queries_in_cache：當前緩存的查詢（和響應）的數量。
Qcache_total_blocks：緩存中塊的數量。

咱們再查詢一下服務器關於query_cache的配置：

mysql> show variables like 'query_cache%';
+------------------------------+-----------+
| Variable_name             | Value     |
+------------------------------+-----------+
| query_cache_limit          | 2097152 |
| query_cache_min_res_unit     | 4096    |
| query_cache_size          | 203423744 |
| query_cache_type          | ON        |
| query_cache_wlock_invalidate | OFF    |
+------------------------------+-----------+
各字段的解釋：

query_cache_limit：超過此大小的查詢將不緩存
query_cache_min_res_unit：緩存塊的最小大小
query_cache_size：查詢緩存大小
query_cache_type：緩存類型，決定緩存什麼樣的查詢，示例中表示不緩存 select sql_no_cache 查詢
query_cache_wlock_invalidate：當有其餘客戶端正在對MyISAM表進行寫操做時，若是查詢在query cache中，是否返回cache結果仍是等寫操做完成再讀表獲取結果。

query_cache_min_res_unit的配置是一柄」雙刃劍」，默認是4KB，設置值大對大數據查詢有好處，但若是你的查詢都是小數據查詢，就容易形成內存碎片和浪費。

查詢緩存碎片率 = Qcache_free_blocks / Qcache_total_blocks * 100%

若是查詢緩存碎片率超過20%，能夠用FLUSH QUERY CACHE整理緩存碎片，或者試試減少query_cache_min_res_unit，若是你的查詢都是小數據量的話。

查詢緩存利用率 = (query_cache_size - Qcache_free_memory) / query_cache_size * 100%

查詢緩存利用率在25%如下的話說明query_cache_size設置的過大，可適當減少；查詢緩存利用率在80％以上並且Qcache_lowmem_prunes > 50的話說明query_cache_size可能有點小，要不就是碎片太多。

查詢緩存命中率 = (Qcache_hits - Qcache_inserts) / Qcache_hits * 100%

示例服務器查詢緩存碎片率＝ 20.46％，查詢緩存利用率＝ 62.26％，查詢緩存命中率＝ 1.94％，命中率不好，可能寫操做比較頻繁吧，並且可能有些碎片。
8、排序使用狀況

mysql> show global status like 'sort%';
+-------------------+------------+
| Variable_name     | Value    |
+-------------------+------------+
| Sort_merge_passes | 29       |
| Sort_range        | 37432840 |
| Sort_rows       | 9178691532 |
| Sort_scan       | 1860569 |
+-------------------+------------+
Sort_merge_passes 包括兩步。MySQL 首先會嘗試在內存中作排序，使用的內存大小由系統變量Sort_buffer_size 決定，若是它的大小不夠把全部的記錄都讀到內存中，MySQL 就會把每次在內存中排序的結果存到臨時文件中，等MySQL 找到全部記錄以後，再把臨時文件中的記錄作一次排序。這再次排序就會增長 Sort_merge_passes。實際上，MySQL會用另外一個臨時文件來存再次排序的結果，因此一般會看到 Sort_merge_passes增長的數值是建臨時文件數的兩倍。由於用到了臨時文件，因此速度可能會比較慢，增長 Sort_buffer_size 會減小Sort_merge_passes 和建立臨時文件的次數。但盲目的增長 Sort_buffer_size 並不必定能提升速度，見 How fast can you sort data with MySQL?（引自 http://qroom.blogspot.com/2007/09/mysql-select-sort.html，貌似被牆）
另外，增長read_rnd_buffer_size(3.2.3是record_rnd_buffer_size)的值對排序的操做也有一點的好處，參見： http://www.mysqlperformanceblog.com/2007/07/24/what-exactly-is-read_rnd_buffer_size/
9、文件打開數(open_files)

mysql> show global status like 'open_files';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Open_files | 1410   |
+---------------+-------+

mysql> show variables like 'open_files_limit';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| open_files_limit | 4590   |
+------------------+-------+
比較合適的設置：Open_files / open_files_limit * 100% <= 75％
10、表鎖狀況

mysql> show global status like 'table_locks%';
+-----------------------+-----------+
| Variable_name       | Value     |
+-----------------------+-----------+
| Table_locks_immediate | 490206328 |
| Table_locks_waited | 2084912 |
+-----------------------+-----------+
Table_locks_immediate 表示當即釋放表鎖數，Table_locks_waited表示須要等待的表鎖數，若是Table_locks_immediate / Table_locks_waited >5000，最好採用InnoDB引擎，由於InnoDB是行鎖而MyISAM是表鎖，對於高併發寫入的應用InnoDB效果會好些。示例中的服務器Table_locks_immediate / Table_locks_waited ＝ 235，MyISAM就足夠了。
11、表掃描狀況

mysql> show global status like 'handler_read%';
+-----------------------+-------------+
| Variable_name       | Value    |
+-----------------------+-------------+
| Handler_read_first | 5803750     |
| Handler_read_key    | 6049319850   |
| Handler_read_next     | 94440908210 |
| Handler_read_prev     | 34822001724 |
| Handler_read_rnd    | 405482605 |
| Handler_read_rnd_next | 18912877839 |
+-----------------------+-------------+
各字段解釋參見 http://hi.baidu.com/thinkinginlamp/blog/item/31690cd7c4bc5cdaa144df9c.html，調出服務器完成的查詢請求次數：

mysql> show global status like 'com_select';
+---------------+-----------+
| Variable_name | Value     |
+---------------+-----------+
| Com_select | 222693559 |
+---------------+-----------+
計算表掃描率：

表掃描率＝ Handler_read_rnd_next / Com_select
若是表掃描率超過4000，說明進行了太多表掃描，頗有可能索引沒有建好，增長read_buffer_size值會有一些好處，但最好不要超過8MB。