?最近項目不太忙，所以有時間靜心來研究下mysql的優化，對于MySQL的設置是否合理優化，直接影響到網站的速度和承載量！同時，MySQL也是優化難度最大的一個部分，不但需要理解一些MySQL專業知識，同時還需要長時間的觀察統計并且根據經驗進行判斷，然后設置合理的參數。 下面我們了解一下MySQL優化的一些基礎，MySQL的優化我分為兩個部分，一是服務器物理硬件的優化，二是MySQL自身(my.cnf)的優化。

一、服務器硬件對MySQL性能的影響
①磁盤尋道能力（磁盤I/O）,以目前高轉速SCSI硬盤(7200轉/秒)為例，這種硬盤理論上每秒尋道7200次，這是物理特性決定的，沒有辦法改變。MySQL每秒鐘都在進行大量、復雜的查詢操作，對磁盤的讀寫量可想而知。所以，通常認為磁盤I/O是制約MySQL性能的最大因素之一，對于日均訪問量在100萬PV以上的Discuz!論壇，由于磁盤I/O的制約，MySQL的性能會非常低下！解決這一制約因素可以考慮以下幾種解決方案： 使用RAID-0+1磁盤陣列，注意不要嘗試使用RAID-5，MySQL在RAID-5磁盤陣列上的效率不會像你期待的那樣快。

②CPU 對于MySQL應用，推薦使用S.M.P.架構的多路對稱CPU，例如：可以使用兩顆Intel Xeon 3.6GHz的CPU，現在我較推薦用4U的服務器來專門做數據庫服務器，不僅僅是針對于mysql。

③物理內存對于一臺使用MySQL的Database Server來說，服務器內存建議不要小于2GB，推薦使用4GB以上的物理內存，不過內存對于現在的服務器而言可以說是一個可以忽略的問題，工作中遇到了高端服務器基本上內存都超過了16G。

二、MySQL自身因素當解決了上述服務器硬件制約因素后，讓我們看看MySQL自身的優化是如何操作的。 對MySQL自身的優化主要是對其配置文件my.cnf中的各項參數進行優化調整。下面我們介紹一些對性能影響較大的參數。 由于my.cnf文件的優化設置是與服務器硬件配置息息相關的， 因而我們指定一個假想的服務器硬件環境：CPU: 2顆Intel Xeon 2.4GHz 內存: 4GB DDR 硬盤: SCSI 73GB(很常見的2U服務器 ) 。
下面，我們根據以上硬件配置結合一份已經優化好的my.cnf進行說明：

[client] default-character-set=utf8mb4 #mysqlde utf8字符集默認為3位的，不支持emoji表情及部分不常見的漢字，故推薦使用utf8mb4[mysql] default-character-set=utf8mb4[mysqld] skip-locking #避免MySQL的外部鎖定，減少出錯幾率增強穩定性。#skip-name-resolve # 禁止MySQL對外部連接進行DNS解析，使用這一選項可以消除MySQL進行DNS解析的時間。但需要注意，如果開啟該選項，則所有遠程主機連接授權都要使用IP地址方式，否則MySQL將無法正常處理連接請求！ # 因為docker官方的mysql的dockerfile中有一段代碼：echo '[mysqld]\nskip-host-cache\nskip-name-resolve' > /etc/mysql/conf.d/docker.cnf將這個配置寫入另一個文件，這里咱們就不用寫了，docker默認解析docker name或者service為ip，這樣mysql就不用解析了back_log = 512 # MySQL能有的連接數量。當主要MySQL線程在一個很短時間內得到非常多的連接請求，這就起作用， # 然后主線程花些時間(盡管很短)檢查連接并且啟動一個新線程。back_log值指出在MySQL暫時停止回答新請求之前的短時間內多少個請求可以被存在堆棧中。 # 如果期望在一個短時間內有很多連接，你需要增加它。也就是說，如果MySQL的連接數據達到max_connections時，新來的請求將會被存在堆棧中， # 以等待某一連接釋放資源，該堆棧的數量即back_log，如果等待連接的數量超過back_log，將不被授予連接資源。 # 另外，這值（back_log）限于您的操作系統對到來的TCP/IP連接的偵聽隊列的大小。 # 你的操作系統在這個隊列大小上有它自己的限制（可以檢查你的OS文檔找出這個變量的最大值），試圖設定back_log高于你的操作系統的限制將是無效的。默認值為50，對于Linux系統推薦設置為小于512的整數。key_buffer_size = 64M # 這是mysql優化中非常重要的一項配置 # 指定用于索引的緩沖區大小，增加它可得到更好處理的索引(對所有讀和多重寫)。注意：該參數值設置的過大反而會是服務器整體效率降低 # 默認值是16M，對于內存在4GB左右的服務器該參數可設置為384M或512M。 # 想要知道key_buffer_size設置是否合理，通過命令show global status like 'key_read%';來查看Key_read_requests（索引請求次數）和Key_reads（從i/o中讀取數據，也就是未命中索引）， # 計算索引未命中緩存的概率：key_cache_miss_rate = Key_reads / Key_read_requests * 100%，至少是1:100，1:1000更好，比如我的key_cache_miss_rate = 15754 / 26831941 * 100% = 1/1700，也就是說1700個中只有一個請求直接讀取硬盤 # 如果key_cache_miss_rate在0.01%以下的話，key_buffer_size分配的過多，可以適當減少。 # MySQL服務器還提供了key_blocks_*參數：show global status like 'key_blocks_u%'; # Key_blocks_unused表示未使用的緩存簇(blocks)數，Key_blocks_used表示曾經用到的最大的blocks數，比如這臺服務器，所有的緩存都用到了，要么增加key_buffer_size，要么就是過渡索引了，把緩存占滿了。 # 比較理想的設置：Key_blocks_used / (Key_blocks_unused + Key_blocks_used) * 100% < 80%max_connections = 1500 # MySQL的最大連接數，默認是100，測試開過1萬個連接數，并將他們持久化，內存增加了一個多G，由此算出一個連接大概為100+K。 # 如果服務器的并發連接請求量比較大，建議調高此值，以增加并行連接數量，當然這建立在機器能支撐的情況下，因為如果連接數越多，介于MySQL會為每個連接提供連接緩沖區，就會開銷越多的內存，所以要適當調整該值，不能盲目提高設值。可以過'conn%'通配符查看當前狀態的連接數量，以定奪該值的大小。 # 比較理想的設置應該是max_used_connections / max_connections * 100% ≈ 80%，當發現這一比例在10%以下的話，說明最大連接數設置的過高了 # 查看最大的連接數：SHOW VARIABLES LIKE "max_connections"; # 查看已使用的最大連接：SHOW GLOBAL STATUS LIKE 'max_used_connections'; # 顯示連接相關的設置：SHOW STATUS LIKE '%connect%'; # 顯示當前正在執行的mysql連接：SHOW PROCESSLISTinnodb_buffer_pool_size = 128M # InnoDB使用一個緩沖池來保存索引和原始數據, 默認值為128M。 # 這里你設置越大,你在存取表里面數據時所需要的磁盤I/O越少. # 在一個獨立使用的數據庫服務器上,你可以設置這個變量到服務器物理內存大小的80%即5-6GB(8GB內存)，20-25GB(32GB內存)，100-120GB(128GB內存)，注意這是在獨立數據庫服務器中推薦的設置 # 不要設置過大,否則,會導致system的swap空間被占用，導致操作系統變慢，從而減低sql查詢的效率。 # 注意在32位系統上你每個進程可能被限制在 2-3.5G 用戶層面內存限制,所以不要設置的太高.query_cache_size = 0 # MySQL的查詢緩沖大小（從4.0.1開始，MySQL提供了查詢緩沖機制）使用查詢緩沖，MySQL 5.6以后的默認值為0，MySQL將SELECT語句和查詢結果存放在緩沖區中， # query cache（查詢緩存）是一個眾所周知的瓶頸，甚至在并發并不多的時候也是如此。 最佳選項是將其從一開始就停用，設置query_cache_size = 0（MySQL 5.6以后的默認值）并利用其他方法加速查詢：優化索引、增加拷貝分散負載或者啟用額外的緩存（比如memcache或redis）。 # 打開query cache（Qcache）對讀和寫都會帶來額外的消耗：a、讀查詢開始之前必須檢查是否命中緩存。b、如果讀查詢可以緩存，那么執行完之后會寫入緩存。 c、當向某個表寫入數據的時候，必須將這個表所有的緩存設置為失效 # 緩存存放在一個引用表中，通過一個哈希值引用，這個哈希值包括查詢本身，數據庫，客戶端協議的版本等，任何字符上的不同，例如空格，注釋都會導致緩存不命中。 # 通過命令：show status like '%query_cache%';查看查詢緩存相關設置: # # have_query_cache：是否有此功能 # # query_cache_limit：允許 Cache 的單條 Query 結果集的最大容量，默認是1MB，超過此參數設置的 Query 結果集將不會被 Cache # # query_cache_min_res_unit：設置 Query Cache 中每次分配內存的最小空間大小，也就是每個 Query 的 Cache 最小占用的內存空間大小 # # uery_cache_size：設置 Query Cache 所使用的內存大小，默認值為0，大小必須是1024的整數倍，如果不是整數倍，MySQL 會自動調整降低最小量以達到1024的倍數 # # query_cache_type：控制 Query Cache 功能的開關，可以設置為0(OFF),1(ON)和2(DEMAND)三種，意義分別如下： # # # 0(OFF)：關閉 Query Cache 功能，任何情況下都不會使用 Query Cache # # # 1(ON)：開啟 Query Cache 功能，但是當 SELECT 語句中使用的 SQL_NO_CACHE 提示后，將不使用Query Cache # # # 2(DEMAND)：開啟 Query Cache 功能，但是只有當 SELECT 語句中使用了 SQL_CACHE 提示后，才使用 Query Cache # # query_cache_wlock_invalidate：控制當有寫鎖定發生在表上的時刻是否先失效該表相關的 Query Cache，如果設置為 1(TRUE)，則在寫鎖定的同時將失效該表相關的所有 Query Cache，如果設置為0(FALSE)則在鎖定時刻仍然允許讀取該表相關的 Query Cache。 # 通過命令：show status like ‘%Qcache%’;查看查詢緩存使用狀態值: # # Qcache_free_blocks：目前還處于空閑狀態的 Query Cache 中內存 Block 數目 # # Qcache_free_memory：目前還處于空閑狀態的 Query Cache 內存總量 # # Qcache_hits：Query Cache 命中次數 # # Qcache_inserts：向 Query Cache 中插入新的 Query Cache 的次數，也就是沒有命中的次數 # # Qcache_lowmem_prunes：當 Query Cache 內存容量不夠，需要從中刪除老的 Query Cache 以給新的 Cache 對象使用的次數 # # Qcache_not_cached：沒有被 Cache 的 SQL 數，包括無法被 Cache 的 SQL 以及由于 query_cache_type 設置的不會被 Cache 的 SQL # # Qcache_queries_in_cache：目前在 Query Cache 中的 SQL 數量 # # Qcache_total_blocks：Query Cache 中總的 Block 數量 # 如果Qcache_hits的值也非常大，則表明查詢緩沖使用非常頻繁，且Qcache_free_memory值很小，此時需要增加緩沖大小； # 如果Qcache_hits的值不大，且Qcache_free_memory值較大，則表明你的查詢重復率很低，查詢緩存不適合你當前系統，這種情況下使用查詢緩沖反而會影響效率，可以通過設置query_cache_size = 0或者query_cache_type 來關閉查詢緩存。 # Query Cache 的大小設置超過256MB，這也是業界比較常用的做法。此外，在SELECT語句中加入SQL_NO_CACHE可以明確表示不使用查詢緩沖max_connect_errors = 6000 # 對于同一主機，如果有超出該參數值個數的中斷錯誤連接，則該主機將被禁止連接。如需對該主機進行解禁，執行：FLUSH HOST。防止黑客 open_files_limit = 65535 # MySQL打開的文件描述符限制，默認最小1024;當open_files_limit沒有被配置的時候，比較max_connections*5和ulimit -n的值，哪個大用哪個， # 當open_file_limit被配置的時候，比較open_files_limit和max_connections*5的值，哪個大用哪個。table_open_cache = 128 # MySQL每打開一個表，都會讀入一些數據到table_open_cache緩存中，當MySQL在這個緩存中找不到相應信息時，才會去磁盤上讀取。默認值64 # 假定系統有200個并發連接，則需將此參數設置為200*N(N為每個連接所需的文件描述符數目)； # 當把table_open_cache設置為很大時，如果系統處理不了那么多文件描述符，那么就會出現客戶端失效，連接不上max_allowed_packet = 4M # 接受的數據包大小；增加該變量的值十分安全，這是因為僅當需要時才會分配額外內存。例如，僅當你發出長查詢或MySQLd必須返回大的結果行時MySQLd才會分配更多內存。 # 該變量之所以取較小默認值是一種預防措施，以捕獲客戶端和服務器之間的錯誤信息包，并確保不會因偶然使用大的信息包而導致內存溢出。binlog_cache_size = 1M # 一個事務，在沒有提交的時候，產生的日志，記錄到Cache中；等到事務提交需要提交的時候，則把日志持久化到磁盤。默認binlog_cache_size大小32Kmax_heap_table_size = 8M # 定義了用戶可以創建的內存表(memory table)的大小。這個值用來計算內存表的最大行數值。這個變量支持動態改變tmp_table_size = 16M # MySQL的heap（堆積）表緩沖大小。所有聯合在一個DML指令內完成，并且大多數聯合甚至可以不用臨時表即可以完成。 # 大多數臨時表是基于內存的(HEAP)表。具有大的記錄長度的臨時表 (所有列的長度的和)或包含BLOB列的表存儲在硬盤上。 # 如果某個內部heap（堆積）表大小超過tmp_table_size，MySQL可以根據需要自動將內存中的heap表改為基于硬盤的MyISAM表。還可以通過設置tmp_table_size選項來增加臨時表的大小。也就是說，如果調高該值，MySQL同時將增加heap表的大小，可達到提高聯接查詢速度的效果read_buffer_size = 2M # MySQL讀入緩沖區大小。對表進行順序掃描的請求將分配一個讀入緩沖區，MySQL會為它分配一段內存緩沖區。read_buffer_size變量控制這一緩沖區的大小。 # 如果對表的順序掃描請求非常頻繁，并且你認為頻繁掃描進行得太慢，可以通過增加該變量值以及內存緩沖區大小提高其性能read_rnd_buffer_size = 8M # MySQL的隨機讀緩沖區大小。當按任意順序讀取行時(例如，按照排序順序)，將分配一個隨機讀緩存區。進行排序查詢時， # MySQL會首先掃描一遍該緩沖，以避免磁盤搜索，提高查詢速度，如果需要排序大量數據，可適當調高該值。但MySQL會為每個客戶連接發放該緩沖空間，所以應盡量適當設置該值，以避免內存開銷過大sort_buffer_size = 8M # MySQL執行排序使用的緩沖大小。如果想要增加ORDER BY的速度，首先看是否可以讓MySQL使用索引而不是額外的排序階段。 # 如果不能，可以嘗試增加sort_buffer_size變量的大小join_buffer_size = 8M # 聯合查詢操作所能使用的緩沖區大小，和sort_buffer_size一樣，該參數對應的分配內存也是每連接獨享thread_cache_size = 8 # 這個值（默認8）表示可以重新利用保存在緩存中線程的數量，當斷開連接時如果緩存中還有空間，那么客戶端的線程將被放到緩存中， # 如果線程重新被請求，那么請求將從緩存中讀取,如果緩存中是空的或者是新的請求，那么這個線程將被重新創建,如果有很多新的線程， # 增加這個值可以改善系統性能.通過比較Connections和Threads_created狀態的變量，可以看到這個變量的作用。(–>表示要調整的值) # 根據物理內存設置規則如下： # 1G —> 8 # 2G —> 16 # 3G —> 32 # 大于3G —> 64query_cache_limit = 2M #指定單個查詢能夠使用的緩沖區大小，默認1Mft_min_word_len = 4 # 分詞詞匯最小長度，默認4transaction_isolation = REPEATABLE-READ # MySQL支持4種事務隔離級別，他們分別是： # READ-UNCOMMITTED, READ-COMMITTED, REPEATABLE-READ, SERIALIZABLE. # 如沒有指定，MySQL默認采用的是REPEATABLE-READ，ORACLE默認的是READ-COMMITTEDlog_bin = mysql-bin binlog_format = mixed expire_logs_days = 30 #超過30天的binlog刪除log_error = /data/mysql/mysql-error.log #錯誤日志路徑 slow_query_log = 1 long_query_time = 1 #慢查詢時間 超過1秒則為慢查詢 slow_query_log_file = /data/mysql/mysql-slow.logperformance_schema = 0 explicit_defaults_for_timestamp#lower_case_table_names = 1 #不區分大小寫skip-external-locking #MySQL選項以避免外部鎖定。該選項默認開啟default-storage-engine = InnoDB #默認存儲引擎innodb_file_per_table = 1 # InnoDB為獨立表空間模式，每個數據庫的每個表都會生成一個數據空間 # 獨立表空間優點： # 1．每個表都有自已獨立的表空間。 # 2．每個表的數據和索引都會存在自已的表空間中。 # 3．可以實現單表在不同的數據庫中移動。 # 4．空間可以回收（除drop table操作處，表空不能自已回收） # 缺點： # 單表增加過大，如超過100G # 結論： # 共享表空間在Insert操作上少有優勢。其它都沒獨立表空間表現好。當啟用獨立表空間時，請合理調整：innodb_open_filesinnodb_open_files = 500 # 限制Innodb能打開的表的數據，如果庫里的表特別多的情況，請增加這個。這個值默認是300innodb_write_io_threads = 4 innodb_read_io_threads = 4 # innodb使用后臺線程處理數據頁上的讀寫 I/O(輸入輸出)請求,根據你的 CPU 核數來更改,默認是4 # 注:這兩個參數不支持動態改變,需要把該參數加入到my.cnf里，修改完后重啟MySQL服務,允許值的范圍從 1-64innodb_thread_concurrency = 0 # 默認設置為 0,表示不限制并發數，這里推薦設置為0，更好去發揮CPU多核處理能力，提高并發量innodb_purge_threads = 1 # InnoDB中的清除操作是一類定期回收無用數據的操作。在之前的幾個版本中，清除操作是主線程的一部分，這意味著運行時它可能會堵塞其它的數據庫操作。 # 從MySQL5.5.X版本開始，該操作運行于獨立的線程中,并支持更多的并發數。用戶可通過設置innodb_purge_threads配置參數來選擇清除操作是否使用單 # 獨線程,默認情況下參數設置為0(不使用單獨線程),設置為 1 時表示使用單獨的清除線程。建議為1innodb_flush_log_at_trx_commit = 2 # 0：如果innodb_flush_log_at_trx_commit的值為0,log buffer每秒就會被刷寫日志文件到磁盤，提交事務的時候不做任何操作（執行是由mysql的master thread線程來執行的。 # 主線程中每秒會將重做日志緩沖寫入磁盤的重做日志文件(REDO LOG)中。不論事務是否已經提交）默認的日志文件是ib_logfile0,ib_logfile1 # 1：當設為默認值1的時候，每次提交事務的時候，都會將log buffer刷寫到日志。 # 2：如果設為2,每次提交事務都會寫日志，但并不會執行刷的操作。每秒定時會刷到日志文件。要注意的是，并不能保證100%每秒一定都會刷到磁盤，這要取決于進程的調度。 # 每次事務提交的時候將數據寫入事務日志，而這里的寫入僅是調用了文件系統的寫入操作，而文件系統是有 緩存的，所以這個寫入并不能保證數據已經寫入到物理磁盤 # 默認值1是為了保證完整的ACID。當然，你可以將這個配置項設為1以外的值來換取更高的性能，但是在系統崩潰的時候，你將會丟失1秒的數據。 # 設為0的話，mysqld進程崩潰的時候，就會丟失最后1秒的事務。設為2,只有在操作系統崩潰或者斷電的時候才會丟失最后1秒的數據。InnoDB在做恢復的時候會忽略這個值。 # 總結 # 設為1當然是最安全的，但性能頁是最差的（相對其他兩個參數而言，但不是不能接受）。如果對數據一致性和完整性要求不高，完全可以設為2，如果只最求性能，例如高并發寫的日志服務器，設為0來獲得更高性能innodb_log_buffer_size = 4M # 此參數確定些日志文件所用的內存大小，以M為單位。緩沖區更大能提高性能，但意外的故障將會丟失數據。MySQL開發人員建議設置為1－8M之間innodb_log_file_size = 32M # 此參數確定數據日志文件的大小，更大的設置可以提高性能，但也會增加恢復故障數據庫所需的時間innodb_log_files_in_group = 3 # 為提高性能，MySQL可以以循環方式將日志文件寫到多個文件。推薦設置為3innodb_max_dirty_pages_pct = 90 # innodb主線程刷新緩存池中的數據，使臟數據比例小于90%innodb_lock_wait_timeout = 120 # InnoDB事務在被回滾之前可以等待一個鎖定的超時秒數。InnoDB在它自己的鎖定表中自動檢測事務死鎖并且回滾事務。InnoDB用LOCK TABLES語句注意到鎖定設置。默認值是50秒bulk_insert_buffer_size = 8M # 批量插入緩存大小， 這個參數是針對MyISAM存儲引擎來說的。適用于在一次性插入100-1000+條記錄時， 提高效率。默認值是8M。可以針對數據量的大小，翻倍增加。myisam_sort_buffer_size = 8M # MyISAM設置恢復表之時使用的緩沖區的尺寸，當在REPAIR TABLE或用CREATE INDEX創建索引或ALTER TABLE過程中排序 MyISAM索引分配的緩沖區myisam_max_sort_file_size = 10G # 如果臨時文件會變得超過索引，不要使用快速排序索引方法來創建一個索引。注釋：這個參數以字節的形式給出myisam_repair_threads = 1 # 如果該值大于1，在Repair by sorting過程中并行創建MyISAM表索引(每個索引在自己的線程內) interactive_timeout = 28800 # 服務器關閉交互式連接前等待活動的秒數。交互式客戶端定義為在mysql_real_connect()中使用CLIENT_INTERACTIVE選項的客戶端。默認值：28800秒（8小時）wait_timeout = 28800 # 服務器關閉非交互連接之前等待活動的秒數。在線程啟動時，根據全局wait_timeout值或全局interactive_timeout值初始化會話wait_timeout值， # 取決于客戶端類型(由mysql_real_connect()的連接選項CLIENT_INTERACTIVE定義)。參數默認值：28800秒（8小時） # MySQL服務器所支持的最大連接數是有上限的，因為每個連接的建立都會消耗內存，因此我們希望客戶端在連接到MySQL Server處理完相應的操作后， # 應該斷開連接并釋放占用的內存。如果你的MySQL Server有大量的閑置連接，他們不僅會白白消耗內存，而且如果連接一直在累加而不斷開， # 最終肯定會達到MySQL Server的連接上限數，這會報'too many connections'的錯誤。對于wait_timeout的值設定，應該根據系統的運行情況來判斷。 # 在系統運行一段時間后，可以通過show processlist命令查看當前系統的連接狀態，如果發現有大量的sleep狀態的連接進程，則說明該參數設置的過大， # 可以進行適當的調整小些。要同時設置interactive_timeout和wait_timeout才會生效。[mysqldump] quick max_allowed_packet = 16M #服務器發送和接受的最大包長度[myisamchk] key_buffer_size = 8M sort_buffer_size = 8M read_buffer = 4M write_buffer = 4M

總結：mysql配置項的優化是一件非常復雜且長期堅持的事情，因為不同的并發級別會導致某個配置項不符合當前的情況，所以希望能和大家一起持續關注著mysql的優化，也同樣歡迎大家列出自己再mysql優化中遇到的各種坑，讓大家學習和借鑒。

與50位技術專家面對面20年技術見證，附贈技術全景圖

總結

以上是生活随笔為你收集整理的MySQL优化之my.conf配置详解的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。