MySQL系列详解三：MySQL中各类日志详解-技术流ken

前言

日志文件记录了MySQL数据库的各种类型的活动，MySQL数据库中常见的日志文件有 查询日志，慢查询日志，错误日志，二进制日志，中继日志 。下面分别对他们进行介绍。

查询日志

1.查看查询日志变量

查询日志即查看日志记录了所有对 MySQL 数据库请求的信息，不论这些请求是否得到了正确的执行。默认为 主机名.log


mysql> show global variables like "%gen%log%";
+------------------+------------------------------------+
| Variable_name    | Value                              |
+------------------+------------------------------------+
| general_log      | OFF                                |
| general_log_file | /data/mysql/mysql3306/data/ken.log |
+------------------+------------------------------------+
 rows in set (0.00 sec)

2.查询日志变量详解

 log on|off：                 指定是否记录查询日志     <<< mysql5.6开始就弃用该选项
 general_log：                指定是否记录查询日志
 log_output none|table|file： 指定将记录到的查询保存到什么位置
 file：                       保存成一个文件
 table：                      保存成一张表
 none：                       不记录
 general_log_file：           指定将查询日志保存成哪个文件、叫什么名

慢查询日志

1.查看慢查询日志变量

慢查询日志用来记录响应时间超过阈值的SQL语句，所以我们可以设置一个阈值，将运行时间超过该值的所有SQL语句都记录到慢查询日志文件中。该阈值可以通过参数 slow_launch_time来设置，默认为2秒。

 mysql> show global variables like "%slow%";
 +---------------------------+----------+
 | Variable_name             | Value    |
 +---------------------------+----------+
 | log_slow_admin_statements | OFF      |
 | log_slow_slave_statements | ON       |
 | slow_launch_time          |         |
 | slow_query_log            | ON       |
 | slow_query_log_file       | slow.log |
 +---------------------------+----------+
  rows in set (0.00 sec)

2.慢查询日志变量详解

 slow_query_log on|off：  指定是否启用慢查询日志
 slow_query_log_file：    指定慢查询日志文件
 slow_launch_time：       指定在多长时间内没有执行完额查询是慢查询
 log_output：             指定将记录到的查询保存到什么位置

错误日志

1.查看错误日志变量

错误日志文件对MySQL的启动，运行，关闭过程进行了记录。

 mysql> show global variables like "%error%";
 +---------------------+--------------+
 | Variable_name       | Value        |
 +---------------------+--------------+
 | binlog_error_action | ABORT_SERVER |
 | log_error           | ./error.log  |
 | log_error_verbosity |             |
 | max_connect_errors  |        |
 | max_error_count     |            |
 | slave_skip_errors   | OFF          |
 +---------------------+--------------+
  rows in set (0.00 sec)

2.错误日志变量详解

 log_error：        指定错误日志的文件及其路径
 log_warnings：     指定将哪个级别的警告日志记录到错误日志中
 sql_warnings：     指定是否记录在执行sql语句时候所触发的经过信息

二进制日志

1.关于二进制日志以及二进制日志变量

二进制日志记录了对数据库执行更改的所有操作，但是不包括 select 和 show 这类操作，因为这类操作对数据本身并没有修改，如果你还想记录select和show操作，那只能使用查询日志了，而不是二进制日志。

此外，二进制还包括了执行数据库更改操作的时间和执行时间等信息。 二进制日志主要有以下几种作用 :

• 恢复(recovery) ： 某些数据的恢复需要二进制日志，如当一个数据库全备文件恢复后，我们可以通过二进制的日志进行 point-in-time 的恢复
• 复制(replication) : 通过复制和执行二进制日志使得一台远程的 MySQL 数据库(一般是slave 或者 standby) 与一台MySQL数据库(一般为master或者primary) 进行实时同步
• 审计(audit) ：用户可以通过二进制日志中的信息来进行审计，判断是否有对数据库进行注入攻击

 mysql> show global variables like "%bin%";
 +--------------------------------------------+--------------------------------------------+
 | Variable_name                              | Value                                      |
 +--------------------------------------------+--------------------------------------------+
 | bind_address                               | *                                          |
 | binlog_cache_size                          |                                     |
 | binlog_checksum                            | CRC32                                      |
 | binlog_direct_non_transactional_updates    | OFF                                        |
 | binlog_error_action                        | ABORT_SERVER                               |
 | binlog_format                              | ROW                                        |
 | binlog_group_commit_sync_delay             |                                           |
 | binlog_group_commit_sync_no_delay_count    |          
...        

2.二进制日志变量详解

 log_bin on|off：                         也是指定是否启用二进制日志（全局的）
 log_bin_basename /path/to/binlog：       指定二进制日志的文件的基名
 log_bin_index /path/to/binlog.index：    指定二进制日志文件的索引文件
 binlog_format row|mixex|statement：      指定基于那种方式进行记录
 sync_binlog #：                          指定隔多久将缓存中的信息刷新到二进制日志文件中。
                                       -->每次提交事务，会将缓存中的内存刷新到二进制日志文件中。
 7                                       -->默认每个sql语句是一个事务，而且默认事务会自动提交，所以，默认的性能很差
 max_binlog_size #：                      指定二进制日志文件的上限，超过上限回滚动
 max_binlog_cache_size  #：               指定二进制日志缓存空间大小，空间被填满，会自动滚动
 sql_log_off on|off：                     是否将一般的查询操作记录到二进制日志中
 sql_log_bin on|off：                     也是指定是否启用二进制日志（会话级别）
 log_bin_trust_function_creators on|off： 指定是否允许创建可能导致不安全的函数

3.查看二进制日志文件

对于二进制日志文件来说，不像错误日志文件，慢查询日志文件那样用cat，vim等命令可以查看，它需要通过 MySQL 提供的工具 mysqlbinlog

 [root@ken ~]# mysqlbinlog /data/mysql/mysql3306/logs/mysql-bin.
 /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/;
 /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
 DELIMITER /*!*/;
 # at
 #  :: server id   end_log_pos  CRC32 0x27fde4a9     Start: binlog v , server v 5.7.-log created   :: at startup
 ROLLBACK/*!*/;
 BINLOG '
 kHu/Ww8qTw8AdwAAAHsAAAAAAAQANS43LjIzLWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
 AAAAAAAAAAAAAAAAAACQe79bEzgNAAgAEgAEBAQEEgAAXwAEGggAAAAICAgCAAAACgoKKioAEjQA
 Aank/Sc=
 '/*!*/;
 # at
 #  :: server id   end_log_pos  CRC32 0x4e3fc05f     Previous-GTIDs
 # [empty]
 # at
 #  :: server id   end_log_pos  CRC32 0x368d3215     Stop
 SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
 DELIMITER ;
 # End of log file
 /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
 /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

中继日志

1.查看中继日志日志变量

用于实现mysql的主从复制

 mysql> show global variables like "%relay%";
 +---------------------------+--------------------------------------------+
 | Variable_name             | Value                                      |
 +---------------------------+--------------------------------------------+
 | max_relay_log_size        |                                   |
 | relay_log                 | relay-bin                                  |
 | relay_log_basename        | /data/mysql/mysql3306/data/relay-bin       |
 | relay_log_index           | /data/mysql/mysql3306/data/relay-bin.index |
 | relay_log_info_file       | relay-log.info                             |
 | relay_log_info_repository | FILE                                       |
 | relay_log_purge           | ON                                         |
 | relay_log_recovery        | ON                                         |
 | relay_log_space_limit     |                                           |
 | sync_relay_log            |                                       |
 | sync_relay_log_info       |                                       |
 +---------------------------+--------------------------------------------+
  rows in set (0.00 sec)

2.二进制日志变量详解

 relay_log fileName：       指定中继日志的文件名。【文件名为空，表示禁用了中继日志】
 relay_log_index：          索引表
 relay_log_info_file：      记录中继日志文件的相关信息
 relay_log_purge：          指定是否自动删除无用的中继日志文件
 relay_log_recovery：       是否可以对中继日志做自动恢复相关的配置
 relay_log_space_limit：    指定中继日志可以占用的空间大小（0表示不限制）

3.SQL线程应用中继日志流程