mysql日志管理#慢日志详解

MySQL的慢查询日志是MySQL提供的一种日志记录，它用来记录在MySQL中响应时间超过阀值的语句，具体指运行时间超过long_query_time值的SQL，则会被记录到慢查询日志中

long_query_time的默认值为10s。默认情况下，Mysql数据库并不启动慢查询日志，需要我们手动来设置这个参数，当然，如果不是调优需要的话，一般不建议启动该参数，因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件，也支持将日志记录写入数据库表

配置文件my.cnf与慢日志相关的参数

slow_query_log = 1 # 开启慢日志功能
long_query_time = 1 # 超过1s的查询定义为慢查询
slow_query_log_file = /data/mysql/mysql-slow.log # 存储位置

其他参数

log_queries_not_using_indexes：未使用索引的查询也被记录到慢查询日志中（可选项）。

log_output：日志存储方式。log_output='FILE'表示将日志存入文件，默认值是'FILE'。log_output='TABLE'表示将日志存入数据库，这样日志信息就会被写入到mysql.slow_log表中。MySQL数据库支持同时两种日志存储方式，配置的时候以逗号隔开即可，如：log_output='FILE,TABLE'。日志记录到系统的专用日志表中，要比记录到文件耗费更多的系统资源，因此对于需要启用慢查询日志，又需<br>要能够获得更高的系统性能，那么建议优先记录到文件。

log_queries_not_using_indexes：未使用索引的查询也被记录到慢查询日志中（可选项）。如果调优的话，建议开启这个选项。另外，开启了这个参数，其实使用`full index scan`的sql也会被记录到慢查询日志。

log_slow_admin_statements：表示是否将慢管理语句例如ANALYZE TABLE和ALTER TABLE等记入慢查询日志

查看慢日志相关信息

# 查看慢日志配置
MySQL [(none)]> show variables like '%slow%';
+---------------------------+----------------------------+
| Variable_name | Value |
+---------------------------+----------------------------+
| log_slow_admin_statements | OFF |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | ON |
| slow_query_log_file | /data/mysql/mysql-slow.log |
+---------------------------+----------------------------+
5 rows in set (0.00 sec)

# 查看日志输出的存储形式
MySQL [(none)]> show variables like '%log_output%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_output | FILE |
+---------------+-------+
1 row in set (0.00 sec)

# 查看慢查询配置时间
MySQL [(none)]> show variables like 'long_query_time';
+-----------------+----------+
| Variable_name | Value |
+-----------------+----------+
| long_query_time | 1.000000 |
+-----------------+----------+
1 row in set (0.00 sec)

热更新慢查询日志

前两天犯了个错，使用>/data/mysql/mysql-slow.log将日志清空了，然后就没管了，后面发现日志有几天都没记录，还以为是同时代码优化的不错，昨天zabbix监控显示慢查询日志多了1000多条，因为有新的业务加进来。然后去看慢日志的时候就懵逼了，空的...

其实我到现在也不知道是不是这个原因造成的，但是我只进行了这个操作，有大神知道请指教下

重启数据库是不可能的，那就只能在线热‘重启’慢查询日志了

确认开启了慢查询日志

MySQL [(none)]> show variables like '%slow_query_log%';
+---------------------+----------------------------+
| Variable_name | Value |
+---------------------+----------------------------+
| slow_query_log | ON |
| slow_query_log_file | /data/mysql/mysql-slow.log |
+---------------------+----------------------------+
2 rows in set (0.00 sec)

MySQL [(none)]> show global status like '%slow_queries%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Slow_queries | 1117 |
+---------------+-------+
1 row in set (0.00 sec)

MySQL [(none)]> show variables like 'long_query_time';
+-----------------+----------+
| Variable_name | Value |
+-----------------+----------+
| long_query_time | 1.000000 |
+-----------------+----------+
1 row in set (0.00 sec)

MySQL [(none)]> show variables like '%log_output%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_output | FILE |
+---------------+-------+
1 row in set (0.00 sec)

关闭日志服务

MySQL [(none)]> set global slow_query_log=0;
Query OK, 0 rows affected (0.02 sec)

MySQL [(none)]> show variables like '%slow%';
+---------------------------+----------------------------+
| Variable_name | Value |
+---------------------------+----------------------------+
| log_slow_admin_statements | OFF |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | OFF |
| slow_query_log_file | /data/mysql/mysql-slow.log |
+---------------------------+----------------------------+
5 rows in set (0.00 sec)

指定新的慢查询日志文件

MySQL [(none)]> set global slow_query_log_file='/data/mysql/mysql-slownew.log';
Query OK, 0 rows affected (0.00 sec)

MySQL [(none)]> show variables like '%slow%';
+---------------------------+-------------------------------+
| Variable_name | Value |
+---------------------------+-------------------------------+
| log_slow_admin_statements | OFF |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | OFF |
| slow_query_log_file | /data/mysql/mysql-slownew.log |
+---------------------------+-------------------------------+
5 rows in set (0.01 sec)

开启日志

MySQL [(none)]> set global slow_query_log=1;
Query OK, 0 rows affected (0.00 sec)

MySQL [(none)]> show variables like '%slow%';
+---------------------------+-------------------------------+
| Variable_name | Value |
+---------------------------+-------------------------------+
| log_slow_admin_statements | OFF |
| log_slow_slave_statements | OFF |
| slow_launch_time | 2 |
| slow_query_log | ON |
| slow_query_log_file | /data/mysql/mysql-slownew.log |
+---------------------------+-------------------------------+
5 rows in set (0.00 sec)

验证

MySQL [(none)]> select sleep(5);
+----------+
| sleep(5) |
+----------+
| 0 |
+----------+
1 row in set (5.00 sec)

使用mysqldumpslow对慢日志进行分析

Parse and summarize the MySQL slow query log. Options are

--verbose verbose
--debug debug
--help write this text to standard output

-v verbose
-d debug
-s ORDER what to sort by (al, at, ar, c, l, r, t), 'at' is default
al: average lock time
ar: average rows sent
at: average query time
c: count
l: lock time
r: rows sent
t: query time
-r reverse the sort order (largest last instead of first)
-t NUM just show the top n queries
-a don't abstract all numbers to N and strings to 'S'
-n NUM abstract numbers with at least n digits within names
-g PATTERN grep: only consider stmts that include this string
-h HOSTNAME hostname of db server for *-slow.log filename (can be wildcard),
default is '*', i.e. match all
-i NAME name of server instance (if using mysql.server startup script)
-l don't subtract lock time from total time

-s, 是表示按照何种方式排序
c: 访问计数
l: 锁定时间
r: 返回记录
t: 查询时间
al:平均锁定时间
ar:平均返回记录数
at:平均查询时间
-t, 是top n的意思，即为返回前面多少条的数据；
-g, 后边可以写一个正则匹配模式，大小写不敏感的；

示例

得到返回记录集最多的10个SQL。
mysqldumpslow -s r -t 10 /database/mysql/mysql_slow.log

得到根据locktime排序的10个SQL
mysqldumpslow -s c -t 10 /data/mysql/mysql-slow.log

得到包含"member_id"关键字的SQL
mysqldumpslow -s c -g "member_id" -t 10 /data/mysql/mysql-slow.log