MySQL数据库:通用查询日志和慢查询日志分析
MySQL中的日志包括:通用查詢日志、慢查詢日志、錯誤日志、二進制日志等等。這里主要記錄一下兩種比較常用的日志:通用查詢日志和慢查詢日志。
(1)通用查詢日志:記錄建立的客戶端連接和執行的語句。
(2)慢查詢日志:記錄所有執行時間超過long_query_time 秒的所有查詢或者不使用索引的查詢。
?
一、通用查詢日志:
1、查看當前通用日志查詢是否開啟:
?show variables like '%general%';
?
?如果general_log 的值為ON則為開啟,為OFF則為關閉(默認關閉)
2、查看通用日志的輸出格式:
show variables like ‘%log_output%’;
?
通用查詢日志輸出的格式可以是FILE(存儲在數據庫的數據文件中的hostname.log),也可以是TABLE(存儲在數據庫中的mysql.general_log)
3、開啟MySQL通用查詢日志 與 設置通用日志輸出方式:
set global general_log=on;? ##開啟通用日志查詢
set global general_log=off;? ##關閉通用日志查詢
set global log_output='File;? ##設置通用日志文件輸出為文件方式
set global log_output='TABLE';? ##設置通用日志文件輸出為表方式
set global log_output='File,TABLE';? ##設置通用日志文件輸出為文件和表方式
?(注意:上述命令只對當前生效,當MySQL重啟失效,如果要永久生效,需要配置my.cnf或者my.ini文件,見第5點)
4、日志輸出效果圖:
(1)記錄到mysql.general_log表中的數據如下:
select * from mysql.general_log;
記錄到本地中的.log中的格式如下:
5、修改配置文件:
在my.cnf 或者my.ini 文件的 [mysqld]下的下方加入:
general_log=1? #為1表示開啟通用日志查詢,值為0表示關閉通用日志查詢
log_output=FILE,TABLE#設置通用日志的輸出格式為文件和表
?
?
二、慢查詢日志:
MySQL的慢查詢日志用來記錄在MySQL中響應時間超過閾值的語句,具體指運行時間超過 long_query_time 值的SQL,則會被記錄到慢查詢日志中(日志可以寫入文件或者數據庫表,如果對性能要求高的話,建議寫文件)。默認情況下,MySQL數據庫是不開啟慢查詢日志的,long_query_time的默認值為10(即10秒,通常設置為1秒),即運行10秒以上的語句是慢查詢語句。
一般來說,慢查詢發生在大表(比如:一個表的數據量有幾百萬),且查詢條件的字段沒有建立索引,此時,要匹配查詢條件的字段會進行全表掃描,耗時查過long_query_time,則為慢查詢語句。
默認情況下,MySQL數據庫沒有開啟慢查詢日志,需要我們手動來設置這個參數。當然,如果不是調優需要的話,一般不建議啟動該參數,因為開啟慢查詢日志會或多或少帶來一定的性能影響。
1、查詢慢查詢日志的開啟情況:
show variables like '%quer%';
主要掌握以下的幾個參數:
①slow_query_log?的值為ON為開啟慢查詢日志,OFF則為關閉慢查詢日志。
②slow_query_log_file 的值是記錄的慢查詢日志到文件中路徑(注意:默認名為主機名.log,慢查詢日志是否寫入指定文件中,需要指定慢查詢的輸出日志格式為文件,相關命令為:show variables like ‘%log_output%’;去查看輸出的格式)。
③long_query_time 指定了慢查詢的閾值,即如果執行語句的時間超過該閾值則為慢查詢語句,默認值為10秒。
④log_queries_not_using_indexes 如果值設置為ON,則會記錄所有沒有利用索引的查詢(注意:如果只是將log_queries_not_using_indexes設置為ON,而將slow_query_log設置為OFF,此時該設置也不會生效,即該設置生效的前提是slow_query_log的值設置為ON),一般在性能調優的時候會暫時開啟。
2、慢查詢相關配置(臨時):
如果都是通過MySQL的shell將參數設置進去,重啟MySQL后,所有設置好的參數將失效,如果想要永久的生效,需要將配置參數寫入my.cnf文件中。
開啟慢查詢日志設置:
set global slow_query_log='ON';?
set global slow_query_log='OFF';? ##關閉慢查詢日志?
設置慢查詢日志存放的位置:
set global slow_query_log_file='/usr/local/mysql/data/slow.log';
設置超時記錄的閾值:
set long_query_time = 1;
3、慢查詢相關配置(永久):
在my.cnf 或者my.ini 文件的 [mysqld]下的下方加入以下配置,重啟MySQL服務:
[mysqld]
slow_query_log = ON
slow_query_log_file = /usr/local/mysql/data/slow.log
long_query_time = 1
4、設置慢查詢存儲的方式(默認是none):
set global log_output='File;? ##設置通用日志文件輸出為文件方式
set global log_output='TABLE';? ##設置通用日志文件輸出為表方式
set global log_output='File,TABLE';? ##設置通用日志文件輸出為文件和表方式
5、執行測試sql語句:
select sleep(2);
6、慢查詢日志記錄:
(1)慢查詢的日志記錄myql.slow_log表中,格式如下:
select * from mysql.slow_log;? ?
慢查詢的日志記錄到hostname.log文件中,格式如下:
可以看到,不管是表還是文件,都具體記錄了:是那條語句導致慢查詢(sql_text),該慢查詢語句的查詢時間(query_time),鎖表時間(Lock_time),以及掃描過的行數(rows_examined)等信息。
7、查詢當前慢查的語句的個數:
show global status like '%slow%';
?
三、使用慢查詢日志分析工具mysqldumpslow分析日志:
我們通過查看慢查詢日志可以發現,很亂,數據量大的時候,可能一天會產生幾個G的日志,根本沒有辦法去清晰明了的分析。所以,這里,我們采用MySQL自帶的慢查詢日志分析工具析日志 mysqldumpslow工具進行分析。
查看 mysqldumpslow 的幫助信息:mysqldumpslow --help
-s: 表示按何種方式排序:
c: 訪問次數
l: 鎖定時間
r: 返回記錄
t: 查詢時間
al: 平均鎖定時間
ar: 平均返回記錄數
at: 平均查詢時間
-t: 返回前面多少條的數據;
-g: 后邊搭配一個正則匹配模式,大小寫不敏感的。
得到返回記錄集最多的10個SQL:
mysqldumpslow -s r -t 10 /var/lib/mysql/show.log
得到訪問次數最多的10個SQL:
mysqldumpslow -s c -t 10 /var/lig/mysql/show.log
得到按照時間排序的前10條里面含有左連接的查詢語句:
mysqldumpslow -s t -t 10 -g "left join" /var/lig/mysql/show.log
另外建議在使用這些命令時結構 | 和more使用,否則有可能出現爆屏情況:
mysqldumpslow -s r -t 10 /var/lig/mysql/show.log | more
?
相關博客:
https://blog.csdn.net/timchen525/article/details/75268151
?
總結
以上是生活随笔為你收集整理的MySQL数据库:通用查询日志和慢查询日志分析的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: MySQL数据库:使用show prof
- 下一篇: MySQL数据库:锁机制