MySQL通用查询日志和慢查询的日志分析

MySQL中的日志包括:错误日志、二进制日志、通用查询日志、慢查询日志等等。这里主要介绍下比较经常使用的两个功能:通用查询日志和慢查询日志。mysql

1)通用查询日志:记录创建的客户端链接和执行的语句。正则表达式

2)慢查询日志:记录全部执行时间超过longquerytime秒的全部查询或者不使用索引的查询sql

(1)通用查询日志shell

在学习通用日志查询时,须要知道两个数据库中的经常使用命令:数据库

1) show variables like ‘%general%’;函数

能够查看,当前的通用日志查询是否开启,若是general_log的值为ON则为开启,为OFF则为关闭(默认状况下是关闭的)。工具

1) show variables like ‘%log_output%’;性能

查看当前慢查询日志输出的格式,能够是FILE(存储在数数据库的数据文件中的hostname.log),也能够是TABLE(存储在数据库中的mysql.general_log)学习

问题:如何开启MySQL通用查询日志,以及如何设置要输出的通用日志输出格式呢?日志

开启通用日志查询: set global general_log=on;

关闭通用日志查询: set global general_log=off;

设置通用日志输出为表方式: set global log_output=’TABLE’;

设置通用日志输出为文件方式: set global log_output=’FILE’;

设置通用日志输出为表和文件方式:set global log_output=’FILE,TABLE’;

(注意:上述命令只对当前生效,当MySQL重启失效,若是要永久生效,须要配置 my.cnf)

my.cnf文件的配置以下:

general_log=1 #为1表示开启通用日志查询,值为0表示关闭通用日志查询

log_output=FILE,TABLE#设置通用日志的输出格式为文件和表

(2)慢查询日志

MySQL的慢查询日志是MySQL提供的一种日志记录,用来记录在MySQL中响应时间超过阈值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中(日志能够写入文件或者数据库表,若是对性能要求高的话,建议写文件)。默认状况下,MySQL数据库是不开启慢查询日志的,long_query_time的默认值为10(即10秒,一般设置为1秒),即运行10秒以上的语句是慢查询语句。

通常来讲,慢查询发生在大表(好比:一个表的数据量有几百万),且查询条件的字段没有创建索引,此时,要匹配查询条件的字段会进行全表扫描,耗时查过long_query_time,

则为慢查询语句。

问题:如何查看当前慢查询日志的开启状况?

在MySQL中输入命令:

show variables like ‘%quer%’;

主要掌握如下的几个参数:

(1)slow_query_log的值为ON为开启慢查询日志,OFF则为关闭慢查询日志。

(2)slow_query_log_file 的值是记录的慢查询日志到文件中(注意:默认名为主机名.log,慢查询日志是否写入指定文件中,须要指定慢查询的输出日志格式为文件,相关命令为:show variables like ‘%log_output%’;去查看输出的格式)。

(3)long_query_time 指定了慢查询的阈值,即若是执行语句的时间超过该阈值则为慢查询语句,默认值为10秒。

(4)log_queries_not_using_indexes 若是值设置为ON,则会记录全部没有利用索引的查询(注意:若是只是将log_queries_not_using_indexes设置为ON,而将slow_query_log设置为OFF,此时该设置也不会生效,即该设置生效的前提是slow_query_log的值设置为ON),通常在性能调优的时候会暂时开启。

问题:设置MySQL慢查询的输出日志格式为文件仍是表,或者二者都有?

经过命令:show variables like ‘%log_output%’;

经过log_output的值能够查看到输出的格式,上面的值为TABLE。固然,咱们也能够设置输出的格式为文本,或者同时记录文本和数据库表中,设置的命令以下:

#慢查询日志输出到表中(即mysql.slow_log)

set globallog_output=’TABLE’;

#慢查询日志仅输出到文本中(即:slow_query_log_file指定的文件)

setglobal log_output=’FILE’;

#慢查询日志同时输出到文本和表中

setglobal log_output=’FILE,TABLE’;

关于慢查询日志的表中的数据个文本中的数据格式分析:

慢查询的日志记录myql.slow_log表中,格式以下:

MySQL通用查询日志和慢查询的日志分析

 

慢查询的日志记录到hostname.log文件中,格式以下:

MySQL通用查询日志和慢查询的日志分析

 

能够看到,无论是表仍是文件,都具体记录了:是那条语句致使慢查询(sql_text),该慢查询语句的查询时间(query_time),锁表时间(Lock_time),以及扫描过的行数(rows_examined)等信息。

问题:如何查询当前慢查询的语句的个数?

在MySQL中有一个变量专门记录当前慢查询语句的个数:

输入命令:show global status like ‘%slow%’;

MySQL通用查询日志和慢查询的日志分析

 

注意:上述全部命令,若是都是经过MySQL的shell将参数设置进去,若是重启MySQL,全部设置好的参数将失效,若是想要永久的生效,须要将配置参数写入my.cnf文件中)。

补充知识点:如何利用MySQL自带的慢查询日志分析工具mysqldumpslow分析日志?

perlmysqldumpslow –s c –t 10 slow-query.log

具体参数设置以下:

-s 表示按何种方式排序,c、t、l、r分别是按照记录次数、时间、查询时间、返回的记录数来排序,ac、at、al、ar,表示相应的倒叙;

-t 表示top的意思,后面跟着的数据表示返回前面多少条;

-g 后面能够写正则表达式匹配,大小写不敏感。

MySQL通用查询日志和慢查询的日志分析

 

上述中的参数含义以下:

Count:414 语句出现了414次;

Time=3.51s(1454) 执行最长时间为3.51s,累计总耗费时间1454s;

Lock=0.0s(0) 等待锁最长时间为0s,累计等待锁耗费时间为0s;

Rows=2194.9(9097604) 发送给客户端最多的行数为2194.9,累计发送给客户端的函数为90976404

注意:mysqldumpslow脚本是用perl语言写的,具体mysqldumpslow的用法后期再讲)

问题:实际在学习过程当中,如何得知设置的慢查询是有效的?

很简单,咱们能够手动产生一条慢查询语句,好比,若是咱们的慢查询log_query_time的值设置为1,则咱们能够执行以下语句:

selectsleep(1);

该条语句便是慢查询语句,以后,即可以在相应的日志输出文件或表中去查看是否有该条语句。

相关文章
相关标签/搜索