mysql優化篇

看到的一篇總結html

information_schema 數據庫中包含這個mysql的各類信息mysql

mysql.sock 丟失後如何鏈接數據庫redis

套接字鏈接
mysql -uroot

TCP鏈接
/usr/mysql/bin/mysql --protocol=TCP -uroot -p -P3306 -h 192.168.1.75

  

SQL優化

查看sql執行效率sql

show status like 'com_%'

定位效率低的sql數據庫

explain select * from student\G;
explain extentded select * from student\G;
ALL  index range ref eq_ref const,system null

 

以上爲explain的type類型,從左向右性能由最差查到最好緩存

select @@profiling;

select count(*) from student;
show profiles;
show profile for query 4;

爲搜索字段建索引安全

create index id_title on film(title(10))
alter table tbl drop index  datetime

在Join表的時候使用至關類型的列,並將其索引,儘可能用來取代in語句和子查詢服務器

ORDER BY RAND() 效率比較低session

使用 ENUM 而不是 VARCHAR ?

ENUM 類型是很是快和緊湊的。在實際上,其保存的是 TINYINT,但其外表上顯示爲字符串。這樣一來,用這個字段來作一些選項列表變得至關的完美。數據結構

若是你有一個字段,好比「性別」,「國家」,「民族」,「狀態」或「部門」,你知道這些字段的取值是有限並且固定的,那麼,你應該使用 ENUM 而不是 VARCHAR。

  1. 從 PROCEDURE ANALYSE() 取得建議
  2. 儘量的使用 NOT NULL
  3. 把IP地址存成 UNSIGNED INT
  4. 固定長度的表會更快
  5. 垂直分割
  6. 使用不一樣的引擎
  7. myisam count()的時候就比較快
  8. 拆分delete,insert等,或更新頻率比較大的字段作成單獨表
  9. orderby語句 後面的值必定要利用索引
  10. groupby 以後統計用WITH ROLLUP ,條件添加having
  11. 含有in子查詢的儘可能試用join操做完成
  12. or 語句兩個都用試用到索引
  13. 使用中間表提升統計查詢速度(再多個表中的數據或者不少條件查詢的結果導入一個數據結構中,在統計)
-- 查看索引試用狀況
show status like 'handler_read%'

按期分析表,檢查表,優化表

analyze table student;
check table student;
OPTIMIZE TABLE student;

經常使用SQL優化

數據導入操做

-- 對於  myisam類型的,DISABLE KEYS , ENABLE KEYS 關閉,打開myisam的表惟一索引以即可以更新
ALTER TABLE student DISABLE KEYS;
LOAD DATA INFILE '/home/changyuan/data.txt' into TABLE student;
ALTER TABLE student ENABLE KEYS;


-- INNODB 類型的數據,先關閉惟一索引和自動增加在導入數據
SET UNIQUE_CHECKS=0;
LOAD DATA INFILE '/home/changyuan/data.txt' INTO TABLE student;
SET UNIQUE_CHECKS=1;

SET AUTOCOMMIT=0;
LOAD DATA INFILE '/home/changyuan/data.txt' INTO TABLE student;
SET AUTOCOMMIT=1;

 

優化insert into 語句插入多行一塊兒比單一語句較快

insert into test values(1,1),(1,2),(1,3),(1,4)

 

 

分頁查詢優化

思路一:單表查詢表主鍵索引以後,join查詢

 

EXPLAIN SELECT * from pre_forum_thread ORDER BY `subject` limit 80,5;
EXPLAIN SELECT * from pre_forum_thread as t INNER JOIN (SELECT tid from pre_forum_thread ORDER BY `subject` limit 80,5) as tt on t.tid=tt.tid;

 

思路二:limit 轉換成某個位置的查詢,先查出主鍵位置,而後小於這條數據的條數 limit 5

EXPLAIN SELECT * from pre_forum_thread ORDER BY tid limit 80,5;

EXPLAIN SELECT tid,subject from pre_forum_thread ORDER BY tid limit 80,5;
EXPLAIN SELECT tid,subject from pre_forum_thread where tid < @tid ORDER BY tid limit 5;

使用sql提示

-- 使用索引,去除索引,強制索引
EXPLAIN SELECT COUNT(1) from pre_forum_thread USE INDEX(`dateline`);
EXPLAIN SELECT COUNT(1) from pre_forum_thread IGNORE INDEX(`dateline`);
EXPLAIN SELECT COUNT(1) from pre_forum_thread FORCE INDEX(`dateline`) where tid >10000;

正則使用方式

SELECT 'dsfdfabckadad' REGEXP "^d";
SELECT 'dsfdfabckadad' REGEXP "d$";

SELECT * from pre_forum_thread WHERE `subject` REGEXP "心理$" limit 1;

MyiSAM表鎖問題

myisam 爲表鎖,讀鎖和寫鎖,其中一個鎖定另外一個sesstion等待,知道釋放

-- 當前會話 讀鎖 只能查詢被本身鎖定的讀鎖,但本身不能更新,不能查詢未被鎖定的表,其餘session不能更新此鎖定的表
LOCK TABLES pre_forum_thread READ LOCAL, pre_forum_post READ LOCAL;
SELECT tid,subject from pre_forum_thread limit 1;
SELECT pid,message from pre_forum_post limit 1;

SELECT * from pre_common_admincp_group LIMIT 1;  -- 這裏報錯

UNLOCK TABLES;
-- session1 當前會話 寫鎖 不阻塞讀全部人的讀操做,阻塞別人的寫請求
LOCK TABLES pre_forum_thread WRITE;
SELECT tid,subject from pre_forum_thread limit 1;

UNLOCK TABLES;

-- session2 
UPDATE pre_forum_thread set `subject`='產後心理1' where tid =35122;  -- session1 lock tables 這裏阻塞等待

併發插入,myisam有一個系統變量 concurrent_insert 用來控制併發行爲值爲 0  不容許併發插入;1 沒有空洞(刪除的行),容許從表尾插入,此爲默認設置;2 不管有沒有空洞,均可以在表尾部併發插入

-- session1 當前會話 寫鎖 不阻塞讀全部人的讀操做,阻塞別人的寫請求
LOCK TABLES pre_forum_thread READ LOCAL;
INSERT INTO pre_forum_thread VALUES()(); -- 讀鎖定不能更新本身 ERRORS

        -- session2 這裏若是concurrent_insert 爲2的時候,容許併發插入(insert)
      INSERT INTO pre_forum_thread VALUES()();  -- 這裏就能夠插入  
        UPDATE pre_forum_thread set `subject`='產後心理1' where tid =35122;  --  可是這裏不能更新 這裏等待
-- session1 這裏不能讀取上面剛剛插入的數據,update的數據等待
SELECT * from pre_forum_thread limit 1;

UNLOCK TABLES;

 

innodb 行鎖

是經過索引上的索引項加鎖實現的,若是沒有索引,innodb將經過隱藏的聚簇索引來對記錄添加鎖。

-- 查看innodb 行鎖,分爲 共享鎖與排他鎖
show status like 'innodb_row_lock%'

set autocommit = 0;
--  select 不會添加任何鎖,本身添加   共享鎖(S) :兩個session 能夠同時 lock in share MODE ,可是會話1要更新的話等待鎖,這是會話2也更新,會話2會死鎖,會話1更新
SELECT * from pre_cdb_content LOCK in SHARE MODE;
-- 排他鎖(X) ,session1 添加鎖,這裏 會話1更新數據,釋放鎖定,commit;  session2就不能得到此鎖,知道會話1釋放
SELECT * from pre_cdb_content FOR UPDATE;

-- 對於 UPDATE INSERT DELETE 的語句 innodb 自動添加排他鎖(X) 

 

mysql server 配置參數調優

 

[client]
port = 3306
socket = /tmp/mysql.sock
[mysqld]
port = 3306
socket = /tmp/mysql.sock
basedir = /usr/local/mysql
datadir = /data/mysql
pid-file = /data/mysql/mysql.pid
user = mysql
bind-address = 0.0.0.0
server-id = 1 #表示是本機的序號爲1,通常來說就是master的意思
skip-name-resolve
# 禁止MySQL對外部鏈接進行DNS解析,使用這一選項能夠消除MySQL進行DNS解析的時間。但須要注意,若是開啓該選項,
# 則全部遠程主機鏈接受權都要使用IP地址方式,不然MySQL將沒法正常處理鏈接請求
#skip-networking
back_log = 600
# MySQL能有的鏈接數量。當主要MySQL線程在一個很短期內獲得很是多的鏈接請求,這就起做用,
# 而後主線程花些時間(儘管很短)檢查鏈接而且啓動一個新線程。back_log值指出在MySQL暫時中止回答新請求以前的短期內多少個請求能夠被存在堆棧中。
# 若是指望在一個短期內有不少鏈接,你須要增長它。也就是說,若是MySQL的鏈接數據達到max_connections時,新來的請求將會被存在堆棧中,
# 以等待某一鏈接釋放資源,該堆棧的數量即back_log,若是等待鏈接的數量超過back_log,將不被授予鏈接資源。
# 另外,這值(back_log)限於您的操做系統對到來的TCP/IP鏈接的偵聽隊列的大小。
# 你的操做系統在這個隊列大小上有它本身的限制(能夠檢查你的OS文檔找出這個變量的最大值),試圖設定back_log高於你的操做系統的限制將是無效的。
max_connections = 1000
# MySQL的最大鏈接數,若是服務器的併發鏈接請求量比較大,建議調高此值,以增長並行鏈接數量,固然這創建在機器能支撐的狀況下,由於若是鏈接數越多,介於MySQL會爲每一個鏈接提供鏈接緩衝區,就會開銷越多的內存,因此要適當調整該值,不能盲目提升設值。能夠過'conn%'通配符查看當前狀態的鏈接數量,以定奪該值的大小。
max_connect_errors = 6000
# 對於同一主機,若是有超出該參數值個數的中斷錯誤鏈接,則該主機將被禁止鏈接。如需對該主機進行解禁,執行:FLUSH HOST。
open_files_limit = 65535
# MySQL打開的文件描述符限制,默認最小1024;當open_files_limit沒有被配置的時候,比較max_connections*5和ulimit -n的值,哪一個大用哪一個,
# 當open_file_limit被配置的時候,比較open_files_limit和max_connections*5的值,哪一個大用哪一個。
table_open_cache = 128
# MySQL每打開一個表,都會讀入一些數據到table_open_cache緩存中,當MySQL在這個緩存中找不到相應信息時,纔會去磁盤上讀取。默認值64
# 假定系統有200個併發鏈接,則需將此參數設置爲200*N(N爲每一個鏈接所需的文件描述符數目);
# 當把table_open_cache設置爲很大時,若是系統處理不了那麼多文件描述符,那麼就會出現客戶端失效,鏈接不上
max_allowed_packet = 4M
# 接受的數據包大小;增長該變量的值十分安全,這是由於僅當須要時纔會分配額外內存。例如,僅當你發出長查詢或MySQLd必須返回大的結果行時MySQLd纔會分配更多內存。
# 該變量之因此取較小默認值是一種預防措施,以捕獲客戶端和服務器之間的錯誤信息包,並確保不會因偶然使用大的信息包而致使內存溢出。
binlog_cache_size = 1M
# 一個事務,在沒有提交的時候,產生的日誌,記錄到Cache中;等到事務提交須要提交的時候,則把日誌持久化到磁盤。默認binlog_cache_size大小32K
max_heap_table_size = 8M
# 定義了用戶能夠建立的內存表(memory table)的大小。這個值用來計算內存表的最大行數值。這個變量支持動態改變
tmp_table_size = 16M
# MySQL的heap(堆積)表緩衝大小。全部聯合在一個DML指令內完成,而且大多數聯合甚至能夠不用臨時表便可以完成。
# 大多數臨時表是基於內存的(HEAP)表。具備大的記錄長度的臨時表 (全部列的長度的和)或包含BLOB列的表存儲在硬盤上。
# 若是某個內部heap(堆積)表大小超過tmp_table_size,MySQL能夠根據須要自動將內存中的heap表改成基於硬盤的MyISAM表。還能夠經過設置tmp_table_size選項來增長臨時表的大小。也就是說,若是調高該值,MySQL同時將增長heap表的大小,可達到提升聯接查詢速度的效果
read_buffer_size = 2M
# MySQL讀入緩衝區大小。對錶進行順序掃描的請求將分配一個讀入緩衝區,MySQL會爲它分配一段內存緩衝區。read_buffer_size變量控制這一緩衝區的大小。
# 若是對錶的順序掃描請求很是頻繁,而且你認爲頻繁掃描進行得太慢,能夠經過增長該變量值以及內存緩衝區大小提升其性能
read_rnd_buffer_size = 8M
# MySQL的隨機讀緩衝區大小。當按任意順序讀取行時(例如,按照排序順序),將分配一個隨機讀緩存區。進行排序查詢時,
# MySQL會首先掃描一遍該緩衝,以免磁盤搜索,提升查詢速度,若是須要排序大量數據,可適當調高該值。但MySQL會爲每一個客戶鏈接發放該緩衝空間,因此應儘可能適當設置該值,以免內存開銷過大
sort_buffer_size = 8M
# MySQL執行排序使用的緩衝大小。若是想要增長ORDER BY的速度,首先看是否可讓MySQL使用索引而不是額外的排序階段。
# 若是不能,能夠嘗試增長sort_buffer_size變量的大小
join_buffer_size = 8M
# 聯合查詢操做所能使用的緩衝區大小,和sort_buffer_size同樣,該參數對應的分配內存也是每鏈接獨享
thread_cache_size = 8
# 這個值(默認8)表示能夠從新利用保存在緩存中線程的數量,當斷開鏈接時若是緩存中還有空間,那麼客戶端的線程將被放到緩存中,
# 若是線程從新被請求,那麼請求將從緩存中讀取,若是緩存中是空的或者是新的請求,那麼這個線程將被從新建立,若是有不少新的線程,
# 增長這個值能夠改善系統性能.經過比較Connections和Threads_created狀態的變量,能夠看到這個變量的做用。(–>表示要調整的值)
# 根據物理內存設置規則以下:
# 1G  —> 8
# 2G  —> 16
# 3G  —> 32
# 大於3G  —> 64
query_cache_size = 8M
#MySQL的查詢緩衝大小(從4.0.1開始,MySQL提供了查詢緩衝機制)使用查詢緩衝,MySQL將SELECT語句和查詢結果存放在緩衝區中,
# 從此對於一樣的SELECT語句(區分大小寫),將直接從緩衝區中讀取結果。根據MySQL用戶手冊,使用查詢緩衝最多能夠達到238%的效率。
# 經過檢查狀態值'Qcache_%',能夠知道query_cache_size設置是否合理:若是Qcache_lowmem_prunes的值很是大,則代表常常出現緩衝不夠的狀況,
# 若是Qcache_hits的值也很是大,則代表查詢緩衝使用很是頻繁,此時須要增長緩衝大小;若是Qcache_hits的值不大,則代表你的查詢重複率很低,
# 這種狀況下使用查詢緩衝反而會影響效率,那麼能夠考慮不用查詢緩衝。此外,在SELECT語句中加入SQL_NO_CACHE能夠明確表示不使用查詢緩衝
query_cache_limit = 2M
#指定單個查詢可以使用的緩衝區大小,默認1M
key_buffer_size = 4M
#指定用於索引的緩衝區大小,增長它可獲得更好處理的索引(對全部讀和多重寫),到你能負擔得起那樣多。若是你使它太大,
# 系統將開始換頁而且真的變慢了。對於內存在4GB左右的服務器該參數可設置爲384M或512M。經過檢查狀態值Key_read_requests和Key_reads,
# 能夠知道key_buffer_size設置是否合理。比例key_reads/key_read_requests應該儘量的低,
# 至少是1:1001:1000更好(上述狀態值可使用SHOW STATUS LIKE 'key_read%'得到)。注意:該參數值設置的過大反而會是服務器總體效率下降
ft_min_word_len = 4
# 分詞詞彙最小長度,默認4
transaction_isolation = REPEATABLE-READ
# MySQL支持4種事務隔離級別,他們分別是:
# READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE.
# 如沒有指定,MySQL默認採用的是REPEATABLE-READ,ORACLE默認的是READ-COMMITTED
log_bin = mysql-bin
binlog_format = mixed
expire_logs_days = 30 #超過30天的binlog刪除
log_error = /data/mysql/mysql-error.log #錯誤日誌路徑
slow_query_log = 1
long_query_time = 1 #慢查詢時間 超過1秒則爲慢查詢
slow_query_log_file = /data/mysql/mysql-slow.log
performance_schema = 0
explicit_defaults_for_timestamp
#lower_case_table_names = 1 #不區分大小寫
skip-external-locking #MySQL選項以免外部鎖定。該選項默認開啓
default-storage-engine = InnoDB #默認存儲引擎
innodb_file_per_table = 1
# InnoDB爲獨立表空間模式,每一個數據庫的每一個表都會生成一個數據空間
# 獨立表空間優勢:
# 1.每一個表都有自已獨立的表空間。
# 2.每一個表的數據和索引都會存在自已的表空間中。
# 3.能夠實現單表在不一樣的數據庫中移動。
# 4.空間能夠回收(除drop table操做處,表空不能自已回收)
# 缺點:
# 單表增長過大,如超過100G
# 結論:
# 共享表空間在Insert操做上少有優點。其它都沒獨立表空間表現好。當啓用獨立表空間時,請合理調整:innodb_open_files
innodb_open_files = 500
# 限制Innodb能打開的表的數據,若是庫裏的表特別多的狀況,請增長這個。這個值默認是300
innodb_buffer_pool_size = 64M
# InnoDB使用一個緩衝池來保存索引和原始數據, 不像MyISAM.
# 這裏你設置越大,你在存取表裏面數據時所須要的磁盤I/O越少.
# 在一個獨立使用的數據庫服務器上,你能夠設置這個變量到服務器物理內存大小的80%
# 不要設置過大,不然,因爲物理內存的競爭可能致使操做系統的換頁顛簸.
# 注意在32位系統上你每一個進程可能被限制在 2-3.5G 用戶層面內存限制,
# 因此不要設置的過高.
innodb_write_io_threads = 4
innodb_read_io_threads = 4
# innodb使用後臺線程處理數據頁上的讀寫 I/O(輸入輸出)請求,根據你的 CPU 核數來更改,默認是4
# 注:這兩個參數不支持動態改變,須要把該參數加入到my.cnf裏,修改完後重啓MySQL服務,容許值的範圍從 1-64
innodb_thread_concurrency = 0
# 默認設置爲 0,表示不限制併發數,這裏推薦設置爲0,更好去發揮CPU多核處理能力,提升併發量
innodb_purge_threads = 1
# InnoDB中的清除操做是一類按期回收無用數據的操做。在以前的幾個版本中,清除操做是主線程的一部分,這意味着運行時它可能會堵塞其它的數據庫操做。
# 從MySQL5.5.X版本開始,該操做運行於獨立的線程中,並支持更多的併發數。用戶可經過設置innodb_purge_threads配置參數來選擇清除操做是否使用單
# 獨線程,默認狀況下參數設置爲0(不使用單獨線程),設置爲 1 時表示使用單獨的清除線程。建議爲1
innodb_flush_log_at_trx_commit = 2
# 0:若是innodb_flush_log_at_trx_commit的值爲0,log buffer每秒就會被刷寫日誌文件到磁盤,提交事務的時候不作任何操做(執行是由mysql的master thread線程來執行的。
# 主線程中每秒會將重作日誌緩衝寫入磁盤的重作日誌文件(REDO LOG)中。不論事務是否已經提交)默認的日誌文件是ib_logfile0,ib_logfile1
# 1:當設爲默認值1的時候,每次提交事務的時候,都會將log buffer刷寫到日誌。
# 2:若是設爲2,每次提交事務都會寫日誌,但並不會執行刷的操做。每秒定時會刷到日誌文件。要注意的是,並不能保證100%每秒必定都會刷到磁盤,這要取決於進程的調度。
# 每次事務提交的時候將數據寫入事務日誌,而這裏的寫入僅是調用了文件系統的寫入操做,而文件系統是有 緩存的,因此這個寫入並不能保證數據已經寫入到物理磁盤
# 默認值1是爲了保證完整的ACID。固然,你能夠將這個配置項設爲1之外的值來換取更高的性能,可是在系統崩潰的時候,你將會丟失1秒的數據。
# 設爲0的話,mysqld進程崩潰的時候,就會丟失最後1秒的事務。設爲2,只有在操做系統崩潰或者斷電的時候纔會丟失最後1秒的數據。InnoDB在作恢復的時候會忽略這個值。
# 總結
# 設爲1固然是最安全的,但性能頁是最差的(相對其餘兩個參數而言,但不是不能接受)。若是對數據一致性和完整性要求不高,徹底能夠設爲2,若是隻最求性能,例如高併發寫的日誌服務器,設爲0來得到更高性能
innodb_log_buffer_size = 2M
# 此參數肯定些日誌文件所用的內存大小,以M爲單位。緩衝區更大能提升性能,但意外的故障將會丟失數據。MySQL開發人員建議設置爲1-8M之間
innodb_log_file_size = 32M
# 此參數肯定數據日誌文件的大小,更大的設置能夠提升性能,但也會增長恢復故障數據庫所需的時間
innodb_log_files_in_group = 3
# 爲提升性能,MySQL能夠以循環方式將日誌文件寫到多個文件。推薦設置爲3
innodb_max_dirty_pages_pct = 90
# innodb主線程刷新緩存池中的數據,使髒數據比例小於90%
innodb_lock_wait_timeout = 120 
# InnoDB事務在被回滾以前能夠等待一個鎖定的超時秒數。InnoDB在它本身的鎖定表中自動檢測事務死鎖而且回滾事務。InnoDB用LOCK TABLES語句注意到鎖定設置。默認值是50秒
bulk_insert_buffer_size = 8M
# 批量插入緩存大小, 這個參數是針對MyISAM存儲引擎來講的。適用於在一次性插入100-1000+條記錄時, 提升效率。默認值是8M。能夠針對數據量的大小,翻倍增長。
myisam_sort_buffer_size = 8M
# MyISAM設置恢復表之時使用的緩衝區的尺寸,當在REPAIR TABLE或用CREATE INDEX建立索引或ALTER TABLE過程當中排序 MyISAM索引分配的緩衝區
myisam_max_sort_file_size = 10G
# 若是臨時文件會變得超過索引,不要使用快速排序索引方法來建立一個索引。註釋:這個參數以字節的形式給出
myisam_repair_threads = 1
# 若是該值大於1,在Repair by sorting過程當中並行建立MyISAM表索引(每一個索引在本身的線程內) 
interactive_timeout = 28800
# 服務器關閉交互式鏈接前等待活動的秒數。交互式客戶端定義爲在mysql_real_connect()中使用CLIENT_INTERACTIVE選項的客戶端。默認值:28800秒(8小時)
wait_timeout = 28800
# 服務器關閉非交互鏈接以前等待活動的秒數。在線程啓動時,根據全局wait_timeout值或全局interactive_timeout值初始化會話wait_timeout值,
# 取決於客戶端類型(由mysql_real_connect()的鏈接選項CLIENT_INTERACTIVE定義)。參數默認值:28800秒(8小時)
# MySQL服務器所支持的最大鏈接數是有上限的,由於每一個鏈接的創建都會消耗內存,所以咱們但願客戶端在鏈接到MySQL Server處理完相應的操做後,
# 應該斷開鏈接並釋放佔用的內存。若是你的MySQL Server有大量的閒置鏈接,他們不只會白白消耗內存,並且若是鏈接一直在累加而不斷開,
# 最終確定會達到MySQL Server的鏈接上限數,這會報'too many connections'的錯誤。對於wait_timeout的值設定,應該根據系統的運行狀況來判斷。
# 在系統運行一段時間後,能夠經過show processlist命令查看當前系統的鏈接狀態,若是發現有大量的sleep狀態的鏈接進程,則說明該參數設置的過大,
# 能夠進行適當的調整小些。要同時設置interactive_timeout和wait_timeout纔會生效。
[mysqldump]
quick
max_allowed_packet = 16M #服務器發送和接受的最大包長度
[myisamchk]
key_buffer_size = 8M
sort_buffer_size = 8M
read_buffer = 4M
write_buffer = 4M

 

例子:

[mysqld]
port = 3306
user=mysql
datadir=/data1/mysql/data/
socket=/data2/tmp/mysql.sock
# Disabling symbolic-links is recommended to prevent assorted security risks
symbolic-links=0
#慢查詢設置
slow-query-log-file=/data1/mysql/data/slow.log
long_query_time =5
slow_query_log=1

#server-id
server-id=1

#binlog 設置
log-bin = /data2/mysql/log/mysql-bin.log
binlog_cache_size = 8M
binlog_format = mixed
expire_logs_days = 14
#replication
#replicate_wild_do_table=stat.%
#replicate_wild_do_table=ask.%
#log_slave_updates = 1

#全局
join_buffer_size = 2M
sort_buffer_size = 2M
read_rnd_buffer_size = 2M
read_buffer_size = 2M 
max_heap_table_size = 64M 
thread_cache_size=12
thread_concurrency = 12
query_cache_type = 0
#query_cache_size = 32M 
ft_min_word_len = 4
thread_stack = 192K
tmp_table_size = 64M
explicit_defaults_for_timestamp=true

#myisam內存設置
key_buffer_size=1024M 

#容許最大的複製傳輸
max_allowed_packet=64M
#跳過dns解析
skip-name-resolve
#鏈接數設置
max_connections = 1000 
max_connect_errors = 2000

#innodb設置
innodb_buffer_pool_size = 70G
innodb_log_buffer_size = 8M
innodb_log_file_size = 512M
innodb_log_files_in_group = 3
innodb_file_per_table=1
innodb_stats_persistent_sample_pages=1000
innodb_write_io_threads = 8
innodb_read_io_threads = 8
innodb_thread_concurrency = 16
innodb_flush_log_at_trx_commit = 2
innodb_lock_wait_timeout = 30
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 

 

 

 

應用優化

避免對同一數據作重複檢索

使用查詢緩存

show VARIABLES like "%query_cache%"

have_query_cache    YES
query_cache_limit    2097152
query_cache_min_res_unit    4096
query_cache_size    67108864
query_cache_type    ON
query_cache_wlock_invalidate    OFF

添加緩存 file,memcache,redis等

 

負載均衡

 

主從複製,(binlog)讀寫分離  (三種複製方式)

binlog_format = statement 基於sql語句級別的

binlog_format = row 基於數據行記錄的

binlog_format = mixed 默認 以上兩種混合

 

show VARIABLES like "%binlog%format%"
  • 一主多從複製架構
  • 多級複製架構
  • 雙主複製/DUAL MASTER架構

 

配置主從複製

-- 主庫:  主從安裝一樣版本的mysql
-- 在主庫添加repl帳戶 而且添加 replication SLAVE 權限
GRANT replication SLAVE on *.* 'repl'@'192.168.1.1' IDENTIFIED by "123456";
-- 修改my.cnf 文件 開啓binlog 並設置server-id=1,這兩個參數重啓生效
[mysqld]
log-bin = /var/mysql/log/mysql-bin.log
server-id = 1
--  在主庫設置讀鎖定,確保沒有數據庫操做,記錄bin-log位置
flush TABLES WITH read LOCK;
-- 查看bin-log日誌名與偏移量
show master STATUS;
-- 備份主庫
tar -cvf DATA.tar data
UNLOCK TABLES;

--從庫:  複製 data.tar文件到從庫目錄
-- 修改從庫my.cnf文件
[mysqld]
server-id = 2
-- 啓動受權
mysql> ./bin/mysqld_safe --skip-slave-start &
CHANGE MASTER TO MASTER_HOST="",MASTER_PORT="",MASTER_USER="",MASTER_PASSWORD="",MASTER_LOG_FILE="mysql-BIN(N).000039",MASTER_LOG_POS=100;

START SLAVE;

-- 查看
show PROCESSLIST;

-- 測試

create TABLE repl_test(id test);
insert into repl_test values(1),(2);
show tables;
SELECT * from repl_test;

-- 查看binlog同步
show VARIABLES like "%sync_binlog%";

 

複製方式分爲異步方式,半同步複製

 

分佈式架構  mysql cluster 

 

高可用分佈式,MMM架構,和MHA架構

相關文章
相關標籤/搜索