关注微信公众号【程序员白泽】,进入白泽的知识分享星球

前言

上周五面试了字节的第三面,深感数据库知识的重要,我也意识到在平时的学习中,自己对于数据库的学习较为薄弱。甚至在有过一定实习经验之后,依旧因为开发分工的原因,对数据库方面的知识掌握依旧不多。我也相信,很多人对MySQL的索引日志多版本并发控制ACID等等都只停留在八股文的阶段。

因此我打算接下来一段时间潜心学习一下MySQL数据库相关的知识点,写作一系列MySQL相关的文章,并且配合实操,希望等这个系列完成之后,可以将MySQL所有重要的知识点全部覆盖,下一次直接对线面试官。

作为系列地第一篇文章,本文将重点介绍MySQL的日志文件类型,并讲解其作用,并结合一定实操演示,相信跟着做下来你会对MySQL有更深的理解

文件的概念

在开始讲MySQL日志文件之前,首先我们要明确一下文件的概念。MySQL数据库是存放在硬盘上的,用户进程通过和一个运行的MySQL实例进程通信(也就是需要一个运行的MySQL服务),通过这个服务去操作磁盘上的MySQL数据库文件,实现数据存取修改的目的,因此,我们先来看看都有哪些文件。

# 在MySQL登录状态下,执行这个命令可以查看我们数据库主要数据文件的位置
mysql> show variables like 'datadir';
+---------------+------------------------+
| Variable_name | Value |
+---------------+------------------------+
| datadir | /usr/local/mysql/data/ |
+---------------+------------------------+
# 得知路径之后在Linux终端进行查看
sudo ls -lh /usr/local/mysql/data/
# 下面是执行了命令之后的部分展示(这里列出了MySQL的各种日志文件、索引相关的文件、你建立的数据库的文件等,先有个概念,等阅读下面讲到的各种文件时可以回上来看一看)
-rw-r----- 1 _mysql _mysql 6.7K 1 19 10:51 binlog.000006
-rw-r----- 1 _mysql _mysql 179B 1 24 15:04 binlog.000007
-rw-r----- 1 _mysql _mysql 48B 1 24 15:05 binlog.index
-rw-r----- 1 _mysql _mysql 4.1K 1 24 15:04 ib_buffer_pool
-rw-r----- 1 _mysql _mysql 48M 2 26 14:06 ib_logfile0
-rw-r----- 1 _mysql _mysql 48M 10 11 11:37 ib_logfile1
drwxr-x--- 5 _mysql _mysql 160B 10 13 15:01 blog
-rw-r----- 1 _mysql _mysql 12M 2 26 14:04 ibdata1
-rw-r----- 1 _mysql _mysql 12M 1 24 15:05 ibtmp1
-rw-r----- 1 _mysql _mysql 180B 3 2 17:28 lilithgamesdeMacBook-Pro-42-slow.log
-rw-r----- 1 _mysql _mysql 249B 3 2 17:55 lilithgamesdeMacBook-Pro-42.log
-rw-r----- 1 _mysql _mysql 24M 2 26 14:04 mysql.ibd
-rw-r----- 1 _mysql _mysql 11K 1 24 15:05 mysqld.local.err
-rw-r----- 1 _mysql _mysql 4B 1 24 15:05 mysqld.local.pid
-rw-r----- 1 _mysql _mysql 16M 2 26 14:06 undo_001
-rw-r----- 1 _mysql _mysql 16M 2 26 14:06 undo_002

参数文件

MySQL登录状态下使用show variables命令查看所有参数(key-value形式),这些参数控制着MySQL的各种状态属性。这个命令在我们需要获取MySQL的各种状态时会被高频使用到。

# 查询所有参数
mysql> show variables;
# 也可以使用like参数指定需要查询的参数
mysql> show variables like 'warning_count';
# 设置全局参数值,键值对的形式
mysql> set global 参数名=参数值

日志文件

错误日志(error log)

错误日志记录了MySQL的启动、运行、关闭的过程。遇到例如MySQL无法正常启动,可以查看错误日志文件。而且错误日志会记录MySQL运行过程中的警告(warning),通过查看这些警告️可以针对出现警告的原因进行优化,从而达到优化数据库的目的。

# 在MySQL登录状态下,使用下面命令可以查看error log在服务器上的位置
mysql> show variables like 'log_error';
+---------------+----------------------------------------+
| Variable_name | Value |
+---------------+----------------------------------------+
| log_error | /usr/local/mysql/data/mysqld.local.err |
+---------------+----------------------------------------+
# 然后通过tail -n 50 查看倒数50行的错误日志内容去定位错误(不是在MySQL登录状态下,而是在Linux用户态下,sudo获取访问权限)
sudo tail -n 50 /usr/local/mysql/data/mysqld.local.err
# 具体日志内容不作展示

慢查询日志(slow query log)

慢查询日志的作用是将运行时间超过设定值的所有SQL语句都记录到慢查询日志中,通过定期检查慢查询日志,通过定位到慢SQL语句之后,对其进行分析,是否是因为索引未生效的等原因导致查询过慢,可以对查询过慢的SQL语句进行优化。

# 在MySQL登录状态下查看慢查询日志阈值,执行时间超过这个值的SQL会被记录下来
mysql> show variables like 'long_query_time';
+-----------------+-----------+
| Variable_name | Value |
+-----------------+-----------+
| long_query_time | 10.000000 |
+-----------------+-----------+
# 查询是否开启慢查询日志(默认关闭)
mysql> show variables like 'slow_query_log';
+----------------+-------+
| Variable_name | Value |
+----------------+-------+
| slow_query_log | OFF |
+----------------+-------+
# 开启慢查询日志
mysql> set global slow_query_log=on;

一个和慢查询日志有关的参数是log_queries_not_using_indexes,开启之后。如果运行的SQL没有使用索引,则MySQL数据库同样会将这条SQL语句记录到慢查询日志文件中。

# 查询是否将未执行索引的SQL加入到慢查询日志当中(默认关闭)
mysql> show variables like 'log_queries_not_using_indexes';
+-------------------------------+-------+
| Variable_name | Value |
+-------------------------------+-------+
| log_queries_not_using_indexes | OFF |
+-------------------------------+-------+
# 开启参数
mysql> set global log_queries_not_using_indexes=on;

查看慢查询日志的路径,以及通过linux命令查看慢查询日志内容。

# 确保在MySQL登录状态下
mysql> show variables like 'slow%';
+---------------------+------------------------------------------------------------+
| Variable_name | Value |
+---------------------+------------------------------------------------------------+
| slow_launch_time | 2 |
| slow_query_log | ON |
| slow_query_log_file | /usr/local/mysql/data/lilithgamesdeMacBook-Pro-42-slow.log |
+---------------------+------------------------------------------------------------+
# 在Linux用户终端查看慢查询日志文件后50页的内容(这个命令我们在上面查看错误日志的时候也用到了)
sudo tail -n 50 /usr/local/mysql/data/lilithgamesdeMacBook-Pro-42-slow.log

除此之外,MySQL还提供了其他参数用于控制每分钟允许插入到慢查询日志中的未使用索引的SQL的语句次数(防止慢查询日志增长过快),以及提供了命令用于筛选慢查询日志中的数据,如展示执行时间最长的10条SQL等等功能,在此不多赘述,大家用到时再多作了解。

查询日志(log)

查询日志记录了所有MySQL数据库的请求信息,如论请求是否得到执行。因为有慢查询日志的存在,一般情况下对查询日志的使用依赖较小,开启后也会有一定的性能损耗,默认关闭。

# 查看查询日志的开启状态和位置
mysql> show variables like 'general_log%';
+------------------+-------------------------------------------------------+
| Variable_name | Value |
+------------------+-------------------------------------------------------+
| general_log | OFF |
| general_log_file | /usr/local/mysql/data/lilithgamesdeMacBook-Pro-42.log |
+------------------+-------------------------------------------------------+
# 开启查询日志
mysql> set global general_log = on;
# 查看查询日志文件(在Linux用户终端,而不是MySQL登录态)
sudo tail -n 50 /usr/local/mysql/data/lilithgamesdeMacBook-Pro-42.log

二进制日志(binary log)

二进制日志记录了对MySQL数据库执行更改的所有操作(不包括select和show命令,但这些会被记录到查询日志中)。二进制日志主要作用有以下几点:

  • 数据恢复:用户可以通过二进制日志进行精确的数据恢复。
  • 主从复制:通过复制和执行二进制日志使得一台远程的MySQL数据库与另一台提供数据的MySQL数据库进行实时同步。
# 通过命令查看二进制日志的开启状态
mysql> show variables like '%log_bin%';
+---------------------------------+------------------------------------+
| Variable_name | Value |
+---------------------------------+------------------------------------+
| log_bin | ON |
| log_bin_basename | /usr/local/mysql/data/binlog |
| log_bin_index | /usr/local/mysql/data/binlog.index |
| log_bin_trust_function_creators | OFF |
| log_bin_use_v1_row_events | OFF |
| sql_log_bin | ON |
+---------------------------------+------------------------------------+

结束语

本文初步介绍了MySQL拥有的日志文件的类型及其作用,其中慢查询日志二进制日志两个点也是面试的高频重点,因此光掌握到本文讲解的程度是略微不够的,后面的文章我讲用例子讲述慢查询日志定位SQL问题的实操(定位到慢SQL之后就要优化它,那么就牵扯到索引设置和优化,又是一个重要知识点️)和二进制日志进行数据恢复和同步的实操(也是很重要的知识点️)。

八股文不是学习的终点,而是一个提纲,是我们学习的起点~

建了一个春秋招备战/内推/闲聊群,欢迎大家加入。

关注公众号【程序员白泽】,带你走近一个有点话痨的程序员/学生党。

浅谈MySQL日志文件|手撕MySQL|对线面试官的更多相关文章

  1. 面试中的MySQL主从复制|手撕MySQL|对线面试官

    关注微信公众号[程序员白泽],进入白泽的知识分享星球 前言 作为<手撕MySQL>系列的第三篇文章,今天讲解使用bin log实现主从复制的功能.主从复制也是MySQL集群实现高可用.数据 ...

  2. MySQL通过bin log日志恢复数据|手撕MySQL|对线面试官

    关注微信公众号[程序员白泽],进入白泽的知识分享星球 前言 作为<手撕MySQL>系列的第二篇文章,今天介绍一下MySQL的二进制日志(bin log),注意不要和MySQL的InnoDB ...

  3. lnmp vps服务器删除mysql日志文件三种方法

    我在上一篇文章介绍了著名的LNMP主机一键安装工具,对比了军哥lnmp和AMH主机的差别,由于AMH拥有用户后台界面,易于新手操作,值得推荐. 但是,上周末我网站宕机,收到DNSPOD发来了宕机提醒, ...

  4. (3.12)mysql基础深入——mysql日志文件/其他文件(socket/pid/表结构/Innodb)

    (3.12)mysql基础深入——mysql日志文件/其他文件(socket/pid/表结构/Innodb) 关键词:mysql日志文件,mysqldumpslow分析工具 目录:日志文件的分类 1. ...

  5. Linux下自动清除MySQL日志文件

    MySQL运行过程中会生成大量的日志文件,占用不少空间,修改my.cnf文件配置bin-log过期时间,在Linux下自动清除MySQL日志文件 [mysqld] expire-logs-days= ...

  6. 浅谈ELK日志分析平台

    作者:珂珂链接:https://zhuanlan.zhihu.com/p/22104361来源:知乎著作权归作者所有.商业转载请联系作者获得授权,非商业转载请注明出处. 小编的话 “技术干货”系列文章 ...

  7. Java全栈,MySQL搞透,架构手到擒来,还有面试官搞不定?

    五月最后一天啦,时间过得真快,做技术的难免做了几年就感觉很迷茫,那就需要多读点书,多学点技术才能有安全感. 栈长之前推荐过不少极客时间的课程,几乎每周都推荐一个,很多朋友评论说,课程太多学不过来,今天 ...

  8. mysql 日志文件mysql-bin文件清除方法,和mysql-bin相关文件的配置

    默认情况下mysql会一直保留mysql-bin文件,这样到一定时候,磁盘可能会被撑满,这时候是否可以删除这些文件呢,是否可以安全删除,是个问题. 首先要说明一下,这些文件都是mysql的日志文件,如 ...

  9. mysql日志文件

    mysql的数据文件夹里出现mysql-bin日志文件,通过my.cnf注释掉log后,是否可以删除了? 参考 http://database.51cto.com/art/201107/278988. ...

随机推荐

  1. 1013day-人口普查系统

    1.shuchu.jsp <%@ page language="java" contentType="text/html; charset=UTF-8" ...

  2. Servlet-ServletConfig类使用介绍

    ServletConfig类(Servlet程序的配置信息类) Servlet 程序和 ServletConfig对象都是由 Tomcat负责创建,我们负责使用. Servlet 程序默认是第一次访问 ...

  3. 运行项目时出现Sat May 15 20:00:19 CST 2021 WARN: Establishing SSL connection without server‘s identity veri

    这时我们只需要在连接数据库的url上设置:useSSL=false就可以了.

  4. 人口信息普查系统-JavaWeb-一

    建民说要期中考试了,我赶紧翻阅了去年的考试题目,去年的试题是要求做一个人口普查系统.我就试着做了一下,今天主要和大家分享题目要求. 其中考试确实有些难度,用到了许多没有接触过的知识,比如JavaScr ...

  5. 常见线程池之 newCacheThreadPool 缓存线程池 简单使用

    package com.aaa.threaddemo; import java.util.concurrent.BlockingQueue; import java.util.concurrent.E ...

  6. eureka的简单介绍,eureka单节点版的实现?eureka的自我保护?eureka的AP性,和CP性?

    注意!!! 这是对上一篇博客 springcloud的延续,整个项目的搭建,来源与上一篇博客.一.什么是eureka? // eureka是一个注册中心,实现了dubbo中zookeeper的效果! ...

  7. 使用Xamarin开发移动应用示例——数独游戏(六)使用数据库

    项目代码可以从Github下载:https://github.com/zhenl/ZL.Shudu .代码随项目进度更新. 现在我们希望为应用增加更多的功能,比如记录每个完成的游戏,可以让用户自己添加 ...

  8. C++的set重载运算符

    转载: https://www.cnblogs.com/zhihaospace/p/12843802.html set 容器模版需要3个泛型参数,如下: template<class T, cl ...

  9. 「LOJ 6373」NOIP2017 普及组题目大融合

    NOIP2017 普及组题目大融合 每个读者需要有某个后缀的书,可以暴力map,复杂度\(o(9*nlog(n))\),也可以反串建trie树,复杂度\(o(9*n)\). 故可以求出需要的最少的RM ...

  10. 对JSP中的Session 简单理解

    我的理解: 简单来说,要使用服务器端的session对象,就是要有其对应的key,即sessionid,它只认识sessionid. 下面我说的cookie,url重写或者隐藏表单,都是为了将其对应的 ...