使用explain优化慢查询的业务场景分析
- 问:你最害怕的事情是什么?
- 答:搓澡
- 问:为什么?
- 答:因为有些人一旦错过,就不在了
Explain
这个词在不同的上下文中有不同的含义。在数据库查询优化的上下文中,"EXPLAIN" 是一个常用的 SQL 命令,用于显示 SQL 查询的执行计划。执行计划是数据库如何执行查询的一个详细描述,包括它将使用哪些索引、表的连接顺序、表的扫描方式等信息。
在 SQL 中,使用 "EXPLAIN" 可以提供以下字段的信息:
- id: 表示查询中的各个部分的标识符。
- select_type: 查询类型,比如简单查询、联合查询、子查询等。
- table: 涉及的表名。
- partitions: 查询涉及的分区信息。
- type: 连接类型,如全表扫描、索引扫描等。
- possible_keys: 可能使用的索引列表。
- key: 实际使用的索引。
- key_len: 使用的索引长度。
- ref: 索引列上使用的列或常量。
- rows: 估计需要检查的行数。
- filtered: 行过滤的百分比。
- Extra: 额外信息,可能包含诸如"Using filesort"、"Using temporary"等信息。
下面,V 哥通过两个案例来详细说明一下如何使用 Explain来优化 SQL。
案例一:
场景设定
假设我们有一个电子商务网站的数据库,其中有一个名为 orders 的表,它记录了用户的订单信息。表结构大致如下:
id: 订单的唯一标识符
user_id: 下单用户的ID
product_id: 购买的产品ID
order_date: 下单日期
quantity: 购买数量
问题
我们需要查询2024年1月1日之后所有用户的订单总数。
原始 SQL 查询
SELECT COUNT(*) FROM orders WHERE order_date > '2024-01-01';
步骤 1: 使用 EXPLAIN 分析查询
首先,我们使用 EXPLAIN 来查看当前查询的执行计划:
EXPLAIN SELECT COUNT(*) FROM orders WHERE order_date > '2024-01-01';
步骤 2: 分析 EXPLAIN 输出
假设 EXPLAIN 的输出显示如下:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | orders | NULL | range | order_date | NULL | NULL | NULL | 10000 | 10.00 | Using where; Using index |
步骤 3: 识别问题
从 EXPLAIN 输出中,我们可以看到:
- type 是 range,这意味着数据库将使用索引进行范围扫描,而不是全表扫描。
- rows 估计为 10000,这可能表示查询需要检查大量行。
- Extra 显示 Using where; Using index,表示使用了索引。
步骤 4: 优化 SQL
尽管查询已经使用了索引,但我们可能希望进一步优化性能。考虑到我们只需要统计总数,而不是具体的订单数据,我们可以:
- 使用索引覆盖扫描:如果 order_date 索引包含 id,则可以避免回表查询,直接在索引中完成统计。
优化后的 SQL 可能如下:
SELECT COUNT(*) FROM orders USE INDEX (order_date) WHERE order_date > '2023-01-01';
步骤 5: 再次使用 EXPLAIN
使用优化后的查询再次运行 EXPLAIN:
EXPLAIN SELECT COUNT(*) FROM orders USE INDEX (order_date) WHERE order_date > '2023-01-01';
步骤 6: 分析优化后的输出
假设优化后的 EXPLAIN 输出显示:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | orders | NULL | index | order_date | order_date | 4 | NULL | 10000 | 10.00 | Using index; Backward index scan |
步骤 7: 评估优化效果
- type 现在是 index,表示使用了索引覆盖扫描。
- Extra 显示 Using index; Backward index scan,表示查询仅使用了索引,没有回表。
通过这些步骤,我们对原始查询进行了分析和优化,提高了查询效率。在实际应用中,可能需要根据具体的数据库结构和数据分布进行更多的调整和优化。
案例二:
我们考虑一个更复杂的场景,涉及到多表查询和联结。
场景设定
假设我们有一个在线教育平台的数据库,其中有两个表:
1. students 表,存储学生信息:
- student_id: 学生ID
- name: 学生姓名
- enrollment_date: 入学日期
2. courses 表,存储课程信息:
- course_id: 课程ID
- course_name: 课程名称
3. 还有一个 enrollments 表,存储学生的课程注册信息:
- enrollment_id: 注册ID
- student_id: 学生ID
- course_id: 课程ID
- enrollment_date: 注册日期
问题
我们需要查询所有在2024年注册了至少一门课程的学生的姓名和他们注册的课程数量。
原始 SQL 查询
SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN enrollments e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 1: 使用 EXPLAIN 分析查询
EXPLAIN SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN enrollments e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 2: 分析 EXPLAIN 输出
假设 EXPLAIN 的输出如下:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | SIMPLE | s | NULL | ALL | NULL | NULL | NULL | NULL | 1000 | NULL | NULL |
1 | SIMPLE | e | NULL | ref | student_id | student_id | 5 | students.student_id | 5000 | NULL | Using where |
步骤 3: 识别问题
- students 表使用了全表扫描(type 是 ALL),这意味着查询需要扫描整个 students 表。
- enrollments 表使用了 ref 类型的联结,它使用了 student_id 索引。
步骤 4: 优化 SQL
我们可以通过以下方式优化查询:
- 添加索引:如果 enrollments 表上的 enrollment_date 没有索引,考虑添加一个,以便快速过滤2023年的注册记录。
- 过滤条件:在联结条件中添加过滤条件,减少需要联结的行数。
优化后的 SQL 可能如下:
SELECT s.name, COUNT(e.course_id) AS course_count
FROM students s
JOIN (
SELECT course_id, student_id
FROM enrollments
WHERE enrollment_date >= '2023-01-01'
) e ON s.student_id = e.student_id
GROUP BY s.name;
步骤 5: 再次使用 EXPLAIN
使用优化后的查询再次运行 EXPLAIN。
步骤 6: 分析优化后的输出
假设优化后的 EXPLAIN 输出显示:
id | select_type | table | partitions | type | possible_keys | key | key_len | ref | rows | filtered | Extra |
---|---|---|---|---|---|---|---|---|---|---|---|
1 | PRIMARY | s | NULL | ALL | NULL | NULL | NULL | NULL | 1000 | NULL | NULL |
2 | DERIVED | e | NULL | range | enrollment_date | NULL | NULL | NULL | 500 | 10.00 | Using where |
1 | SIMPLE | <subquery2> |
NULL | ref | student_id | student_id | 5 | s.student_id | 500 | NULL | Using index |
步骤 7: 评估优化效果
- 子查询 e 现在使用 range 类型扫描,只获取2023年的注册记录,减少了行数。
- 主查询现在使用 ref 类型联结,因为子查询结果已经通过索引 student_id 进行了优化。
通过这些步骤,我们对原始查询进行了分析和优化,减少了需要处理的数据量,提高了查询效率。在实际应用中,可能需要根据具体的数据库结构和数据分布进行更多的调整和优化。
最后
以上是 V 哥在整理的关于 EXPLAIN 在实际工作中的使用,并结合案例给大家作了分析,用熟 EXPLAIN 将大大改善你的 SQL 查询效率,你在工作中还用到哪些业务场景或案例,可以在评论区讨论,或者说出你遇到的问题,V 哥来帮你定位一下问题,关注威哥爱编程
,每天精彩内容不错过。
使用explain优化慢查询的业务场景分析的更多相关文章
- SpringCloud | 通过电商业务场景让你彻底明白SpringCloud核心组件的底层原理
本文分为两个部分: Spring Cloud"全家桶"简单介绍. 通过实际电商业务场景,让你彻底明白Spring Cloud几个核心组件的底层原理. Spring Cloud介绍 ...
- mysql性能优化-慢查询分析、优化索引和配置 (慢查询日志,explain,profile)
mysql性能优化-慢查询分析.优化索引和配置 (慢查询日志,explain,profile) 一.优化概述 二.查询与索引优化分析 1性能瓶颈定位 Show命令 慢查询日志 explain分析查询 ...
- 索引优化之Explain 及慢查询日志
索引:本质是数据结构,简单理解为:排好序的快速查找数据结构,以索引文件的形式存储在磁盘中.目的:提高数据查询的效率,优化查询性能,就像书的目录一样.优势:提高检索效率,降低IO成本:排好序的表,降低C ...
- mysql,存储引擎,事务,锁,慢查询,执行计划分析,sql优化
基础篇:MySql架构与存储引擎 逻辑架构图: 连接层: mysql启动后(可以把mysql类比为一个后台的服务器),等待客户端请求,当请求到来后,mysql建立一个一个线程处理(线程池则分配一个空线 ...
- 10个常见触发IO瓶颈的高频业务场景
摘要:本文从应用业务优化角度,以常见触发IO慢的业务SQL场景为例,指导如何通过优化业务去提升IO效率和降低IO. 本文分享自华为云社区<GaussDB(DWS)性能优化之业务降IO优化> ...
- 通过手动创建统计信息优化sql查询性能案例
本质原因在于:SQL Server 统计信息只包含复合索引的第一个列的信息,而不包含复合索引数据组合的信息 来源于工作中的一个实际问题, 这里是组合列数据不均匀导致查询无法预估数据行数,从而导致无法选 ...
- 受教了,memcache比较全面点的介绍,受益匪浅,适用memcached的业务场景有哪些?memcached的cache机制是怎样的?在设计应用时,可以通过Memcached缓存那些内容?
基本问题 1.memcached的基本设置 1)启动Memcache的服务器端 # /usr/local/bin/memcached -d -m 10 -u root -l 192.168.0.200 ...
- CDN 边缘规则,三秒部署、支持定制、即时生效,多种规则覆盖常用业务场景
2017年的最后一周,又拍云进行了一次重要升级,将自定义 Rewrite 升级为"边缘规则".互联网应用场景的日益多样化,简单.方便.快速的根据不同应用场景实现不同的功能变得越来越 ...
- 整理分布式锁:业务场景&分布式锁家族&实现原理
1.引入业务场景 业务场景一出现: 因为小T刚接手项目,正在吭哧吭哧对熟悉着代码.部署架构.在看代码过程中发现,下单这块代码可能会出现问题,这可是分布式部署的,如果多个用户同时购买同一个商品,就可能导 ...
- 【性能优化】优雅地优化慢查询:缓存+SQL修改组合拳
问题描述 单例数据库模式中,后端高并发请求多(读多写少),导致数据库压力过大,关键接口响应变慢,严重影响体验. 需求 减少接口的响应时间. 寻找解决方案 由于问题主要处在数据库压力过大的情况,采用两种 ...
随机推荐
- 对象存储服务的Lambda特性
AWS S3提供了Lambda服务,详见Amazon S3 Object Lambda. 技术方案 作为兼容AWS S3能力的对象存储服务,交付Lambda特性时,关注点有: 实现方式 SDK 独立进 ...
- 普冉PY32系列(十五) PY32F0系列的低功耗模式
目录 普冉PY32系列(一) PY32F0系列32位Cortex M0+ MCU简介 普冉PY32系列(二) Ubuntu GCC Toolchain和VSCode开发环境 普冉PY32系列(三) P ...
- mac更新nodejs
查看本机node.js版本: node -v 清除node.js的cache:sudo npm cache clean -f 安装 n 工具:sudo npm install -g n 安装最新版本的 ...
- 【源码】蚁群算法TSP问题可视化
ACO.Visualization项目 本项目演示蚁群算法求解旅行商问题的可视化过程,包括路径上的信息素浓度.蚁群的运动过程等.项目相关的代码:https://github.com/anycad/AC ...
- saltstack实践案例
master某个配置参考案例 [root@]# cat /etc/salt/master file_ignore_regex: - '/\.git($|/)' file_ignore_glob: - ...
- ansible使用详解
ansible执行,用户主机配置 免密同一个同一个用户执行命令 1 能免密登录的[root@mcw1 ~]$ ansible 10.0.0.132 -m shell -a "hostname ...
- linux用户管理:创建用户,删除用户,管理用户,用户配置
目录 一.关于用户 二.用户的三种类型 三.与用户有关的配置文件详解 四.创建用户 五.设置用户密码 六.删除用户 七.用户密码时效管理 八.查看用户相关信息的命令 九.修改用户基本信息 十.管理用户 ...
- Java中枚举类的深入理解
概述 在此之前由于个人在学习和开发中对枚举类的应用较少,所以对枚举类的知识点并没进行深入的了解,但最近写代码中突然想到了枚举类,抱着完善自身的知识的目的,就较为深入的了解了Java中的枚举类. 我在学 ...
- 异构数据源同步之数据同步 → datax 再改造,开始触及源码
开心一刻 其实追女生,没那么复杂 只要你花心思,花时间,陪她聊天,带她吃好吃的,耍好玩的,买好看的 慢慢你就会发现什么叫做 打水漂 不说了,我要去陪她看电影了 前情回顾 异构数据源同步之数据同步 → ...
- linux使用过程中遇到的常见问题
1 xxxx is not in the sudoers file. This incident will be reported. 解决方式:https://www.cnblogs.com/xym4 ...