SQL优化

一、SQL优化简介

  • 解释:对于特定的要求,使用更有的SQL策略或索引策略,以达到让结果呈现的时间更短,从而提升操作效率的过程就是SQL优化。
  • SQL优化包含在数据库级别优化中。我们平常所说的SQL优化就是指优化SQL语句和索引。
  • SQL优化是伴随业务而进行优化的,并不是下面的所有操作都必须都达到才是最好的优化。

二、常规调优思路(众多解决方案之一)

  • 查看slow-log,分析slow-log,分析出查询慢的语句。
  • 按照一定优先级,进行一个一个的排查所有慢语句。
  • 分析top sql,进行explain调试,查看语句执行语句。
  • 调整索引或语句本身。

MySQL日志支持

一、MySQL5.7中日志分类

​       MySQL日志分类四类:错误日志(回滚等)、二进制日志(主从)、通用查询日志(记录查询等信息)、慢查询日志

二、通用查询日志

  • 通用查询日志是记录建立的客户端连接和执行的语句
  • 通过show variables like '%version%';查看版本信息

  • 可以通过show variables like '%general%'查看通用查询日志是否卡开启 general_loh 属性取值
    • OFF 表示关闭(默认关闭)
    • ON 表示打开

  • 通过查看日志输出格式
    • File存储在数据库的数据文件中的主机名.log C:\ProgramData\MySQL\MySQL Server 5.7\Data
    • TABLE 存储在数据库中的mysql/general_log

  • 临时开启/关闭通用日志(重启失效)
# 开启
set global general_log = on;
# 关闭
set global general_log = off;
  • 临时设置输出格式(重启失效)
# mysql/general_log
set global log_output-'TABLE';
# 主机名-slow.log
set global log_output='FILE';
# 两者都输出
set global log_output='FILE,TABLE';

  • 永久设置。修改MySQL配置文件
  • windows中日志文件在C:\ProgramData\MySQL\MySQL Server 5.7\my.ini中。
  • 按需配置

  • 配置后重启MySQL服务
  • 日志文件中时间和系统时间不一致问题
  • 查看系统日志文件格式 show variables like '%log_timestamps%';
  • 修改日志文件时间格式为系统时间 set global log_timestamps = SYSTEM

三。错误日志

  • MySQL错误日志记录MySQL运行过程中较为严重的警告和错误信息,以及MySQL启动和关闭的详细信息。以及MySQL每次启动和关闭的详细信息。
  • 通过show variables like '%log_error%';查看
  • binlog_error_action 错误处理方式
  • ABORT_SERVER出现问题终止服务
  • IGNORE_ERROR忽略错误
  • log_error错误日志文件名及路径
  • log_error_verbosity记录级别
  • 取值1表示记录警告信息
  • 大于1表示所有警告信息都记录
  • 日志文件可以通过文本编辑器打开。

四、二进制日志

  • 包含所有更新数据(新增、删除、修改、改表等)SQL信息的记录。
  • MySQL主从配置就依赖这个日志文件
  • 通过show variables like '%log_bin%';查看二进制日志

  • 二进制日志不可以通过修改全局参数开启。全局匹配值问下(my.ini)中该参数是注释的。
# binary Logging
# log-bin

直接设置log-gin的值为日志文件名。

# Binary Logging
log-gin=mylogbin

设置后重启MySQL服务会发现log_bin参数值为ON

  • 开启后二进制文件存储在C:\ProgramData\MySQL\MySQL Server 5.7\Data。里面有个xxx.index文件(这个文件成为二进制文件索引)里面存储了所有二进制文件清单。当重启MySQL服务或过一定时间后会自动生成一个二进制文件。增加的二进制文件编号递增。也可以使用flush logsl命令生成一个新的二进制文件。
  • 也可以通过命令:show binary log;查看目前生成的日志文件。
  • 由于是二进制文件,所以无法直接使用文本编辑器打开,需要借助工具才可以看见。
  • 在navicat或sql命令中输入mysql show binlog events in 'mylogbin.000003';
  • 在命令行输入,借助mysqlbinlog工具
  • 输入命令式要在日志文件所在文件夹路径中运行,也可以在命令中写上日志文件全路径
  • D:/a.sql可以没有,没有表示直接大隐刀控制台mysql mysqlbinlog mylogbin.000003 > D:/a.sql
  • binlog中除了删除IAO创建表的SQL都是加密的,如果希望看见可以使用下面命令
  • 直接打印到控制台会出现中文乱码mysql mysqlbinlog -base64-output=deode-rows -v mysqlbin.000003 > D:/a.sql

五、慢查询日志

  • 记录所有执行时间超过long_query_time秒的所有查询或不适用于索引的查询
  • long_query_time默认时间为10秒。即超过10秒的查询都认为是慢查询
  • 慢查询日志默认名称:住进-slow.log
  • 除了查看my.ini文件以外通过show variables like '%query%';查看

    • slow_query_log 表示是否开启慢查询日志。(默认开启)
    • slow_query_log_file 慢查询日志文件名
    • long_query_time慢查询阈值设置,查处为慢查询。此值直接设置全局参数可能无效,建议测试直接修改配置文件。
    • log_queries_not_using_index是否记录不适用于索引的查询(前提是slow_query_log开启)
    • 可以通过命令查看慢查询日志中慢查询SQL命令的个数。也可以使用文本编辑器直接打开慢查询日志文件。也可以查看mysql.slow_log表中的额数据(前提log_output值包含table)
show status like '%slow_queries%';

SQL高级优化(四)之SQL优化的更多相关文章

  1. MySQL性能优化(四):SQL优化

    原文:MySQL性能优化(四):SQL优化 版权声明:本文为博主原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明. 本文链接:https://blog.csdn.net/ ...

  2. SQL高级优化系列

    目录 SQL高级优化系列(一)之MySQL优化 SQL高级优化系列(二)之MySQL架构 SQL高级优化系列(三)之存储引擎 SQL高级优化系列(四)之SQL优化 SQL高级优化系列(五)之执行计划 ...

  3. SQL高级优化(一)之MySQL优化

    不同方案效率对比 MySQL各字段默认长度(一字节为8位) 整型: TINYINT 1 字节 SMALLINT 2 个字节 MEDIUMINT 3 个字节 INT 4 个字节 INTEGER 4 个字 ...

  4. MySQL性能优化方法四:SQL优化

    原文链接:http://isky000.com/database/mysql-performance-tuning-sql 注:这篇文章是以 MySQL 为背景,很多内容同时适用于其他关系型数据库,需 ...

  5. SQL高级优化(五)之执行计划

    一.explain 执行计划:在MySQL中可以通过explain关键字模拟优化器执行SQL语句,从而知道MySQL是如何处理SQL语句的. explain:MySQL执行计划的工具,查看MySQL如 ...

  6. mysql数据库性能优化(包括SQL,表结构,索引,缓存)

    优化目标减少 IO 次数IO永远是数据库最容易瓶颈的地方,这是由数据库的职责所决定的,大部分数据库操作中超过90%的时间都是 IO 操作所占用的,减少 IO 次数是 SQL 优化中需要第一优先考虑,当 ...

  7. 使用ORACLE SQL Tuning advisor快速优化低效的SQL语句

    ORACLE10G以后版本的SQL Tuning advisor可以从以下四个方面给出优化方案 (1)为统计信息丢失或失效的对象收集统计信息   (2)考虑优化器的任何数据偏差.复杂谓词或失效的统计信 ...

  8. 转://从一条巨慢SQL看基于Oracle的SQL优化

    http://mp.weixin.qq.com/s/DkIPwbDKIjH2FMN13GkT4w 本次分享的内容是基于Oracle的SQL优化,以一条巨慢的SQL为例,从快速解读SQL执行计划.如何从 ...

  9. 从一条巨慢SQL看基于Oracle的SQL优化(重磅彩蛋+PPT)

    本文根据DBAplus社群第110期线上分享整理而成,文末还有好书送哦~ 讲师介绍 丁俊 新炬网络首席性能优化专家 SQL审核产品经理 DBAplus社群联合发起人.<剑破冰山-Oracle开发 ...

随机推荐

  1. 强化学习实战 | 表格型Q-Learning玩井字棋(四)游戏时间

    在 强化学习实战 | 表格型Q-Learning玩井字棋(三)优化,优化 中,我们经过优化和训练,得到了一个还不错的Q表格,这一节我们将用pygame实现一个有人机对战,机机对战和作弊功能的井字棋游戏 ...

  2. Python连接MySQL数据库获取数据绘制柱状图

    一.Python通过pymysql包获取MySQL数据库中的数据(没有对应包的可以通过pip install pymysql 安装对应的包) import matplotlib.pyplot as p ...

  3. linux小应用 —— 日志过滤

    先说问题,统计一个日志文件中去重之后的ip地址的个数.其实这是一个非常常见也比较简单的问题,其中我个人认为最主要的应该是匹配ip地址是这个问题的核心.剩下的就是对linux命令的熟练程度的问题了.首先 ...

  4. netcore XmlDocument 使用Load和Save方法

    string path ="C://xxx/file" XmlDocument xmlDoc = new XmlDocument(); #if NET462 xmlDoc.Load ...

  5. [COCI2018-2019#2] Sunčanje 题解

    link 考虑简洁的 \(\text{cdq}\) 做法. 约定:第 \(i\) 个矩形左下角为 \((xl_i,yl_i)\),右上角为 \((xr_i,yr_i)\),所有坐标都已离散化. 如果 ...

  6. SpringBoot整合knife4j框架(可生成离线接口文档),并设置接口请求头token默认值

    功能和swagger类似 官网地址:https://doc.xiaominfo.com/knife4j/ 这个框架可以设置返回字段的描述 引入依赖 <dependency> <gro ...

  7. java.lang.NoClassDefFoundError: org/w3c/dom/ElementTraversal报错处理

    org.springframework.web.util.NestedServletException: Handler dispatch failed; nested exception is ja ...

  8. c++指针函数和函数指针概述

    欢迎指正 代码写的不够规范: 目的是缩短文章篇幅,实际中请注意 阅读完本文, 你一定能判断和写出:指针函数和函数指针. 0.结论 A.指针函数: 函数的返回值是指针类型 B.函数指针: 函数名是一个指 ...

  9. 【LeetCode】447. Number of Boomerangs 解题报告(Java & Python)

    作者: 负雪明烛 id: fuxuemingzhu 个人博客: http://fuxuemingzhu.cn/ 目录 题目描述 题目大意 解题方法 日期 [LeetCode] 题目地址:https:/ ...

  10. 【LeetCode】467. Unique Substrings in Wraparound String 解题报告(Python)

    作者: 负雪明烛 id: fuxuemingzhu 个人博客: http://fuxuemingzhu.cn/ 题目地址: https://leetcode.com/problems/unique-s ...