SQL优化(3):使用explain了解SQL性能-part2
接上文,上文对type列用实例做了说明,本文对Extra列进行一些说明。
Extra列
Using filesort
前文说,需要对所有的查询结果进行一次排序,例如当使用order by时。但是若查询时用到了index,那么对于order by来说可能就不需要排序了,因为index数据就是按照有序的方式存储的,即按照index的方式进行排列即可。
- 按照某一列(非主键)进行排序
mysql> EXPLAIN SELECT * FROM t1 ORDER BY c_str_value;
+----+-------------+-------+------+---------------+------+---------+------+------+----------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+------+---------------+------+---------+------+------+----------------+
| 1 | SIMPLE | t1 | ALL | NULL | NULL | NULL | NULL | 4915 | Using filesort |
+----+-------------+-------+------+---------------+------+---------+------+------+----------------+
- 按照主键进行排序,可以看到这种情况下并没有filesort。因为InnoDB中,数据项在主键索引的叶节点上,所以等于说所有的数据是按照主键次序存储的,所以不用排序。
mysql> EXPLAIN SELECT * FROM t1 order by c_primary_key;
+----+-------------+-------+-------+---------------+---------+---------+------+-------+-------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+---------------+---------+---------+------+-------+-------+
| 1 | SIMPLE | t1 | index | NULL | PRIMARY | 4 | NULL | 10034 | NULL |
+----+-------------+-------+-------+---------------+---------+---------+------+-------+-------+
- 如果我们在c_str_value上建立索引,那么索引数据就会多出一个二级索引(存的是 当前column+对应的主键)。那么我们再次执行EXPLAIN,如下。结果显示同样需要filesort,为什么mysql不按照c_str_value的索引顺序读记录?偏偏还要进行一次排序呢。这是因为如果从索引读数据的话,是按照索引值->主键值->一行记录。那么我们可以知道在主键->一行记录的过程中,磁盘是随机读取,这样反而不如filesort来的快。
mysql> CREATE INDEX c_str_value_idx ON t1(c_str_value);
mysql> EXPLAIN SELECT * FROM t1 order by c_str_value;
+----+-------------+-------+------+---------------+------+---------+------+-------+----------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+------+---------------+------+---------+------+-------+----------------+
| 1 | SIMPLE | t1 | ALL | NULL | NULL | NULL | NULL | 10034 | Using filesort |
+----+-------------+-------+------+---------------+------+---------+------+-------+----------------+
那么假如查询的列只是(主键,c_str_value)两个列时,不需要filesort,因为c_str_value的索引数据足够应对。
mysql> EXPLAIN SELECT c_primary_key,c_str_value FROM t1 order by c_str_value;
+----+-------------+-------+-------+---------------+-----------------+---------+------+-------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+---------------+-----------------+---------+------+-------+-------------+
| 1 | SIMPLE | t1 | index | NULL | c_str_value_idx | 65 | NULL | 10034 | Using index |
+----+-------------+-------+-------+---------------+-----------------+---------+------+-------+-------------+
mysql> DROP INDEX c_str_value_idx ON t1;
- 如果仅仅是 主键列+index列 不满足需求!那么可以考虑加复合索引,例如需要查询(c_primary_key,c_multi_key_part1,c_multi_key_part2)这三列的话,那么可以给(c_multi_key_part1,c_multi_key_part2)加上index,那么这个索引数据足以应对这次排序,所以不用filesort了。
mysql> explain select c_primary_key,c_multi_key_part1,c_multi_key_part2 from t2 order by c_multi_key_part1;
+----+-------------+-------+-------+---------------+-------------------+---------+------+---------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+---------------+-------------------+---------+------+---------+-------------+
| 1 | SIMPLE | t2 | index | NULL | c_multi_key_part1 | 130 | NULL | 1179542 | Using index |
+----+-------------+-------+-------+---------------+-------------------+---------+------+---------+-------------+
mysql> explain select c_primary_key,c_multi_key_part1,c_multi_key_part2 from t2 where c_multi_key_part1='1' order by c_multi_key_part2;
+----+-------------+-------+------+-------------------+-------------------+---------+-------+------+--------------------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+------+-------------------+-------------------+---------+-------+------+--------------------------+
| 1 | SIMPLE | t2 | ref | c_multi_key_part1 | c_multi_key_part1 | 65 | const | 1 | Using where; Using index |
+----+-------------+-------+------+-------------------+-------------------+---------+-------+------+--------------------------+
在使用复合索引时,要注意复合索引的次序,若是上面SQL中的where条件改为(where c_multi_key_part2=’1’ order by c_multi_key_part1)那么就用不到这个复合索引了。
使用适当的index,来把排序工作放在Insert时完成!
Using index
若是用到了索引数据,那么Extra就会有Using index。
同时需要注意是否有Using where,若是没有,意味着index的所有数据将会被遍历,那么很可能性能也不是太高。
具体实例,可以参考前面的例子。
Using temporary
如字面意思使用临时表。
t1左关联t2表,并按照t2表进行排序,可以看到用了临时表+排序。从输出的字面解读来说,对于来自t1的每一行记录,都有t2的唯一一条(eq_fef)对应。但是t1并不知道t2表的字段c_primary_key是索引(有序的),所以最终到t1查完之后得到result时,仍然需要进行filesort。
mysql> explain select t1.c_primary_key, t1.c_unique_key, t2.c_primary_key from t1 left join t2 on t1.c_primary_key=t2.c_primary_key order by t2.c_primary_key;
+----+-------------+-------+--------+---------------+--------------+---------+-------------------------+---------+----------------------------------------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+--------+---------------+--------------+---------+-------------------------+---------+----------------------------------------------+
| 1 | SIMPLE | t1 | index | NULL | c_unique_key | 65 | NULL | 1181681 | Using index; Using temporary; Using filesort |
| 1 | SIMPLE | t2 | eq_ref | PRIMARY | PRIMARY | 4 | dbTest.t1.c_primary_key | 1 | Using index |
+----+-------------+-------+--------+---------------+--------------+---------+-------------------------+---------+----------------------------------------------+
对于以上sql,可以把t1和t2调整一下次序,可以看到,对于t2的每一行记录,t1都有唯一一行与之对应。对于匹配的每一行结果,t2表知道这已经是按照我的t2.c_primary_key的次序进行排序的了,所以即不用存储临时结果,又不用再做排序了。
mysql> explain select t1.c_primary_key, t1.c_unique_key, t2.c_primary_key from t2 left join t1 on t1.c_primary_key=t2.c_primary_key order by t2.c_primary_key;
+----+-------------+-------+--------+---------------+---------+---------+-------------------------+---------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+--------+---------------+---------+---------+-------------------------+---------+-------------+
| 1 | SIMPLE | t2 | index | NULL | PRIMARY | 4 | NULL | 1179542 | Using index |
| 1 | SIMPLE | t1 | eq_ref | PRIMARY | PRIMARY | 4 | dbTest.t2.c_primary_key | 1 | NULL |
+----+-------------+-------+--------+---------------+---------+---------+-------------------------+---------+-------------+
right join跟left join相反,left join看左边的表,而right join看右边的表!
实际上看explain输出的第一个表示谁!
Group By子句:
- Group By可以使用index进行分组统计,这里索引(c_multi_key_part1,c_multi_key_part2)满足查询需求。
mysql> explain select max(c_multi_key_part2),c_multi_key_part1 from t1 group by c_multi_key_part1;
+----+-------------+-------+-------+-------------------+-------------------+---------+------+---------+-------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+-------------------+-------------------+---------+------+---------+-------------+
| 1 | SIMPLE | t1 | index | c_multi_key_part1 | c_multi_key_part1 | 130 | NULL | 1181681 | Using index |
+----+-------------+-------+-------+-------------------+-------------------+---------+------+---------+-------------+
- Group By中对索引的使用有两种,松散索引扫描和紧凑索引扫描。松散索引扫描需要读取的键值数量和分组的组的数量一样多,也就是比实际存在的键值数目少很多。而紧凑型扫描将读取所有满足条件的索引值。如下,统计c_key不同值的个数,Extra中Using index for group-by表示使用松散扫描。
mysql> explain select count(distinct c_key) from t1;
+----+-------------+-------+-------+---------------+-------+---------+------+---------+-------------------------------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+-------+---------------+-------+---------+------+---------+-------------------------------------+
| 1 | SIMPLE | t1 | range | c_key | c_key | 65 | NULL | 1181682 | Using index for group-by (scanning) |
+----+-------------+-------+-------+---------------+-------+---------+------+---------+-------------------------------------+
紧凑扫描的例子这里不再给出。
- Group By在没有合适索引的情况下,会使用临时表存储结果,然后对临时表进行排序操作,才最终得到结果。
mysql> explain select c_str_value from t1 group by c_str_value;
+----+-------------+-------+------+---------------+------+---------+------+---------+---------------------------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+------+---------------+------+---------+------+---------+---------------------------------+
| 1 | SIMPLE | t1 | ALL | NULL | NULL | NULL | NULL | 1181681 | Using temporary; Using filesort |
+----+-------------+-------+------+---------------+------+---------+------+---------+---------------------------------+
而事实上,若是只要分组而不需要排序的情况下,那么可以使用oder by null,告诉服务器不需要对进过进行排序,如下,这样就没有了Using filesort。
mysql> explain select c_str_value from t1 group by c_str_value order by null;
+----+-------------+-------+------+---------------+------+---------+------+---------+-----------------+
| id | select_type | table | type | possible_keys | key | key_len | ref | rows | Extra |
+----+-------------+-------+------+---------------+------+---------+------+---------+-----------------+
| 1 | SIMPLE | t1 | ALL | NULL | NULL | NULL | NULL | 1181681 | Using temporary |
+----+-------------+-------+------+---------------+------+---------+------+---------+-----------------+
- Group By可以使用index进行分组统计,这里索引(c_multi_key_part1,c_multi_key_part2)满足查询需求。
小结
在Extra,如果有Using temporary和Using filesort,一般来说性能都不会太好,所以需要重点考虑。想在短期或者几篇文档中把所有方面都搞清楚,看来也不现实,还是多在实践中积累吧。
SQL优化(3):使用explain了解SQL性能-part2的更多相关文章
- SQL优化:使用explain
前文说了EXPLAIN的输出的含义,本文实战一下. Database Schema DROP DATABASE dbTest; CREATE DATABASE dbTest; USE dbTest; ...
- SQL 优化总结(三) SQL子句
SQL子句 尽可能编写优化器可以优化的语句. 1. SELECT子句 (1) 在查询Select语句中用Where字句限制返回的行数,避免表扫描,如果返回不必要的数据,浪费了服务器的I/O资源,加重了 ...
- SQL优化技术分析-2:SQL书写的影响
1.同一功能同一性能不同写法SQL的影响. 如一个SQL在A程序员写的为 Select * from zl_yhjbqk B程序员写的为 Select * from dlyx.zl_yhjbqk(带表 ...
- SQL优化技术分析-3:SQL语句索引的利用
使用索引来更快地遍历表.默认情况下建立的索引是非聚集索引,但有时它并不是最佳的.在非聚集索引下,数据 在物理上随机存放在数据页上.合理的索引设计要建立在对各种查询的分析和预测上.一般来说: 有大量重复 ...
- 浅谈SQL优化入门:1、SQL查询语句的执行顺序
1.SQL查询语句的执行顺序 (7) SELECT (8) DISTINCT <select_list> (1) FROM <left_table> (3) <join_ ...
- 浅谈SQL优化入门:2、等值连接和EXPLAIN(MySQL)
1.等值连接:显性连接和隐性连接 在<MySQL必知必会>中对于等值连接有提到两种方式,第一种是直接在WHERE子句中规定如何关联即可,那么第二种则是使用INNER JOIN关键字.如下例 ...
- 对SQL 优化,提升性能!
对SQL 进行优化能够有效提高SQL 语句的执行效率,降低系统资源开销,是开发者提高后端系统处理能力的首选方案. 新产品上线后,随着运营推广活动的开始,业务进入快速增长期,数据库作为后端系统唯一或者主 ...
- 基于Oracle的SQL优化(社区万众期待 数据库优化扛鼎巨著)
基于Oracle的SQL优化(社区万众期待数据库优化扛鼎巨著) 崔华 编 ISBN 978-7-121-21758-6 2014年1月出版 定价:128.00元 856页 16开 编辑推荐 本土O ...
- 转://从一条巨慢SQL看基于Oracle的SQL优化
http://mp.weixin.qq.com/s/DkIPwbDKIjH2FMN13GkT4w 本次分享的内容是基于Oracle的SQL优化,以一条巨慢的SQL为例,从快速解读SQL执行计划.如何从 ...
- 从一条巨慢SQL看基于Oracle的SQL优化(重磅彩蛋+PPT)
本文根据DBAplus社群第110期线上分享整理而成,文末还有好书送哦~ 讲师介绍 丁俊 新炬网络首席性能优化专家 SQL审核产品经理 DBAplus社群联合发起人.<剑破冰山-Oracle开发 ...
随机推荐
- 岭回归&Lasso回归
转自:https://blog.csdn.net/dang_boy/article/details/78504258 https://www.cnblogs.com/Belter/p/8536939. ...
- Django 基础篇章
Django 紧紧地遵循这种 MVC 模式,可以称得上是一种 MVC 框架. 以下是 Django 中 M.V 和 C 各自的含义: M ,数据存取部分,由django数据库层处理. V ,选择显示哪 ...
- [LeetCode]83. Remove Duplicates from Sorted List(排序链表去重)
Given a sorted linked list, delete all duplicates such that each element appear only once. For examp ...
- VS2010/MFC编程入门之十一(对话框:模态对话框及其弹出过程)
加法计算器对话框程序大家照着做一遍后,相信对基于对话框的程序有些了解了,有个好的开始对于以后的学习大有裨益.趁热打铁,鸡啄米这一节讲讲什么是模态对话框和非模态对话框,以及模态对话框怎样弹出. 一.模态 ...
- SQL case when 多条件查询
基于列的逻辑表达式,其实就是CASE表达式.可以用在SELECT,UPDATE,DELETE,SET以及IN,WHERE,ORDER BY和HAVING子句之后.下面给个简单示例:
- Android开发--取消AsyncTask
在Android应用开发过程中,为了防止UI线程堵塞,耗时的工作都应该另起一个后台线程来完成,其中AsyncTask就是其中的一种方式.最近在案子中需要“停止/取消”某个AsyncTask,在网上查了 ...
- QT之QML控件篇
QT quick中提供了很多的实用控件widget,下面介绍几种常用的. 这部分介绍基本是参照QtCretator提供的帮助文档,一定要学会使用,不明白的去查找帮助. Item 基本上所有的可是控件的 ...
- Python3.6(windows系统)解决编码问题
Python3.6(windows系统)解决编码问题 1,py文件代码: import urllib.request url = "http://www.douban.com/" ...
- AJAX,JSON,GSON
AJAX将数据使用JSON格式发送给后端Servlet或其他语言解析. 对JSON内容使用GSON外扩展包进行分解,并使用(如查询用户名是否已经被注册), 最后使用Map集合设置新的返回状态码,并使用 ...
- SpringBoot使用Redis数据库
(1)pom.xml文件引入jar包,如下: <dependency> <groupId>org.springframework.boot</groupId> &l ...