SQL优化的20条军规
前言
作为一个写SQL的程序员,代码写得好不好是一回事,但SQL写得烂,性能拉胯,全公司都得为你的慢查询买单,尤其在大数据量表上,SQL写不好就是“内鬼”级别的错误。
今天不整那些虚的,直接来点硬货:20条SQL优化小技巧,每一条都能救你一命,关键是,我还给你配上代码例子,拿去直接用,希望对你会有所帮助。
我最近开源了一个基于 SpringBoot+Vue+uniapp 的商城项目,里面的技术亮点挺多的,欢迎访问和star。[https://gitee.com/dvsusan/susan_mall]
1. 避免SELECT *
别一上来就 SELECT *,你觉得这样写省事,但数据库得把整张表的每一列都给你搬过来,代价大得吓人。需要啥列写清楚,别偷懒。
-- 错误写法
SELECT * FROM users;
-- 正确写法
SELECT id, name, age FROM users;
优化原因:减少网络传输数据量,避免无用字段占内存。
最后说一句(求关注,别白嫖我)
如果这篇文章对您有所帮助,或者有所启发的话,帮忙关注一下我的同名公众号:苏三说技术,您的支持是我坚持写作最大的动力。
求一键三连:点赞、转发、在看。
关注公众号:【苏三说技术】,在公众号中回复:进大厂,可以免费获取我最近整理的10万字的面试宝典,好多小伙伴靠这个宝典拿到了多家大厂的offer。
2. WHERE字段要有索引
你写 WHERE 条件时,涉及到的字段要有索引。没索引,MySQL 就得一行行地扫描表,全表扫描慢得你怀疑人生。
-- 创建索引
CREATE INDEX idx_users_age ON users(age);
-- 使用索引查询
SELECT * FROM users WHERE age > 25;
优化原因:索引就像目录,能直接跳到你要的那页,而不是一本书从头翻到尾。
3. 用EXPLAIN分析SQL性能
写SQL前,别直接跑,先加个 EXPLAIN 看看执行计划。看啥?type 是不是 ALL,是不是走了全表扫描。如果有,赶紧改。
EXPLAIN SELECT * FROM users WHERE age > 25;
优化原因:清楚执行计划,知道SQL跑得是不是高效。
4. 避免WHERE里的函数操作
别在WHERE条件里对字段用函数,索引直接失效。
-- 错误写法
SELECT * FROM users WHERE YEAR(create_time) = 2023;
-- 正确写法
SELECT * FROM users WHERE create_time >= '2023-01-01' AND create_time < '2024-01-01';
优化原因:函数操作让索引失效,回表扫描浪费时间。
5. 避免OR条件,改用UNION
WHERE 里写了个 OR,可能导致两个字段的索引全失效。别用 OR,用 UNION 替代。
-- 错误写法
SELECT * FROM users WHERE age = 25 OR city = 'shenzhen';
-- 正确写法
SELECT * FROM users WHERE age = 25
UNION
SELECT * FROM users WHERE city = 'shenzhen';
优化原因:OR 会让索引失效,而 UNION 可以分别利用索引。
6. 优化LIMIT分页
LIMIT 用得好不好直接影响性能,特别是分页到 10000 页的时候,直接卡死你。改进方法是用 ID 或时间范围过滤。
-- 错误写法
SELECT * FROM users ORDER BY create_time LIMIT 10000, 10;
-- 正确写法
SELECT * FROM users WHERE id > 10000 ORDER BY id LIMIT 10;
优化原因:用范围过滤减少不必要的扫描。
7. 用覆盖索引
覆盖索引的意思是,查询的字段全在索引里,MySQL 不需要回表。
-- 创建覆盖索引
CREATE INDEX idx_users_age_name ON users(age, name);
-- 查询
SELECT name FROM users WHERE age > 25;
优化原因:只从索引获取数据,不用回表,提高查询速度。
8. 减少JOIN表数量
JOIN 太多表会让执行计划复杂化,数据量大的表用 JOIN,性能就拉了。
-- 复杂的多表JOIN
SELECT * FROM orders
JOIN users ON orders.user_id = users.id
JOIN products ON orders.product_id = products.id;
-- 优化:拆分查询
SELECT * FROM orders WHERE user_id IN (
SELECT id FROM users WHERE age > 25
);
优化原因:减少中间表的数据处理量,降低JOIN复杂度。
9. 使用批量插入
单条插入写多了,性能会被写锁拖垮,换成批量插入。
-- 错误写法
INSERT INTO users (id, name) VALUES (1, 'zhangsan');
INSERT INTO users (id, name) VALUES (2, 'lisi');
-- 正确写法
INSERT INTO users (id, name) VALUES (1, 'zhangsan'), (2, 'lisi');
优化原因:减少数据库连接和提交的次数。
10. GROUP BY前过滤数据
GROUP BY 本质上是对结果排序分组,数据量大时效率感人。先用 WHERE 把数据量缩小。
-- 错误写法
SELECT age, COUNT(*) FROM users GROUP BY age;
-- 正确写法
SELECT age, COUNT(*) FROM users WHERE age > 25 GROUP BY age;
优化原因:减少GROUP BY处理的数据量。
11. LIKE查询优化
模糊查询用 %xxx% 的时候,索引没了,直接全表扫描。改成前缀匹配,或者用全文索引。
-- 前缀匹配
SELECT * FROM users WHERE name LIKE 'zhang%';
-- 全文索引
CREATE FULLTEXT INDEX idx_name ON users(name);
SELECT * FROM users WHERE MATCH(name) AGAINST('zhang');
优化原因:用索引提高查询效率。
12. 避免大字段频繁查询
TEXT 和 BLOB 这种大字段会拖累查询性能,把它们单独拆到一张表。
-- 原表
CREATE TABLE users (
id INT PRIMARY KEY,
name VARCHAR(50),
profile TEXT
);
-- 拆表
CREATE TABLE user_profiles (
user_id INT PRIMARY KEY,
profile TEXT
);
优化原因:减少主表查询时的大字段负担。
13. 定期清理无用数据
表里垃圾数据太多,索引也跟着膨胀,查询性能直线下降。
-- 定期清理历史数据
DELETE FROM logs WHERE create_time < '2022-01-01';
优化原因:保持表轻量化,避免数据膨胀。
14. 用分区表优化大数据表
分区表是大数据量优化的利器,把数据按范围分成多个分区。
CREATE TABLE orders (
id INT NOT NULL,
order_date DATE NOT NULL
) PARTITION BY RANGE (YEAR(order_date)) (
PARTITION p2022 VALUES LESS THAN (2023),
PARTITION p2023 VALUES LESS THAN (2024)
);
优化原因:查询只扫描一个分区,而不是整张表。
15. 索引字段选用低基数的字段
基数低的字段(比如性别)用索引没意义,能用组合索引就用。
-- 错误:性别字段加索引
CREATE INDEX idx_gender ON users(gender);
-- 正确:性别+年龄组合索引
CREATE INDEX idx_gender_age ON users(gender, age);
优化原因:避免低基数索引浪费存储。
16. 控制表字段数量
表字段太多会让数据表臃肿,查询性能也会变差。合理拆分表。
17. 用事务优化批量更新
大批量更新用事务,可以减少锁竞争。
START TRANSACTION;
UPDATE users SET age = age + 1 WHERE age > 25;
COMMIT;
18. 用查询缓存
MySQL 有查询缓存机制,适合静态数据高频查询场景。
-- 开启查询缓存
SET GLOBAL query_cache_size = 1048576;
SELECT SQL_CACHE * FROM users WHERE age > 25;
19. 用PreparedStatement
预编译可以提高性能,还能防止 SQL 注入。
20. 定期优化表
表用了很久会有碎片,定期优化表能提高性能。
OPTIMIZE TABLE users;
总结
SQL 优化是个手艺活,写好 SQL 就能少掉无数锅,尤其是团队开发时,一个烂 SQL 能拖死整个项目。
这 20 条技巧别只看一遍,拿着自己的查询多实践,别等线上掉链子才后悔!
SQL优化的20条军规的更多相关文章
- Yahoo前端优化的35条军规
摘要:无论是在工作中,还是在面试中,web前端性能的优化都是很重要的,那么我们进行优化需要从哪些方面入手呢?可以遵循雅虎的前端优化34条军规,不过现在已经是35条了,所以可以说是雅虎前端优化的35条军 ...
- Oracle SQL性能优化的40条军规
1. SQL语句执行步骤 语法分析> 语义分析> 视图转换 >表达式转换> 选择优化器 >选择连接方式 >选择连接顺序 >选择数据的搜索路径 >运行“执 ...
- MySQL性能优化的20条经验
今天,数据库的操作越来越成为整个应用的性能瓶颈了,这点对于Web应用尤其明显.关于数据库的性能,这并不只是DBA才需要担心的事,而这更是我 们程序员需要去关注的事情.当我们去设计数据库表结构,对操作数 ...
- MySQL性能优化的20+条经验
1. 为查询缓存优化你的查询 大多数的MySQL服务器都开启了查询缓存.这是提高性最有效的方法之一,而且这是被MySQL的数据库引擎处理的.当有很多相同的查询被执行了多次的时候,这些查询结果会被放到一 ...
- Yahoo关于性能优化的N条军规
一. Yahoo的军规条例: 谨记:80%-90%的终端响应时间是花费在下载页面中的图片,样式表,脚本,flash等:详细的解释来这里查:http://developer.yahoo.com/perf ...
- 基于Yahoo网站性能优化的34条军规及自己的见解
1.尽量减少HTTP请求次数 终端用户响应的时间中,有80%用于下载各项内容,这部分时间包括下载页面中的图像.样式表.脚本.Flash等.通过减少页面中的元素可以减少HTTP请求的次数,这是提高网页速 ...
- 雅虎(yahoo)前端优化十四条军规
第一条.尽可能的减少 HTTP 的请求数 (Make Fewer HTTP Requests ) http请求是要开销的,想办法减少请求数自然可以提高网页速度.常用的方法,合并css,js(将一个页面 ...
- Yahoo前端优化十四条军规
相信互联网已经越来越成为人们生活中不可或缺的一部分.Ajax,flex等等富客户端的应用使得人们越加“幸福”地体验着许多原先只能在C/S实 现的功能. 比如Google机会已经把最基本的office应 ...
- Yahoo网站性能优化的34条军规
1.尽量减少HTTP请求次数 终端用户响应的时间中,有80%用于下载各项内容,这部分时间包括下载页面中的图像.样式表.脚本.Flash等.通过减少页面中的元素可以减少HTTP请求的次数,这是提高网页速 ...
- Python性能优化的20条建议 (转载)
优化算法时间复杂度 算法的时间复杂度对程序的执行效率影响最大,在Python中可以通过选择合适的数据结构来优化时间复杂度,如list和set查找某一个元素的时间复杂度分别是O(n)和O(1).不同的场 ...
随机推荐
- SharpZipLib解压.tar.gz
上一篇文章我们说了如何用SharpZipLib来压缩.tar.gz,这篇文章我们来看看如何解压. 直接上代码: using ICSharpCode.SharpZipLib.GZip; using IC ...
- Educational Codeforces Round 65 (Rated for Div
D - Bicolored RBS 给定一个括号序列,现在你必须对每一个括号涂成蓝色或红色,要求使得涂完后的红色括号和蓝色括号序列都必须是合法的括号序列,设红色括号形成的的括号序列的深度为\(dep_ ...
- C# 转 Java
代码级转换,目前唯一可用的方案是 Tangible C# to Java Converter. 把编译后的 IL 转为 bytecode 再反编译也是一个思路,没有找到相关实现. 转换难点并不是语法, ...
- 【XML】学习笔记第二章-dtd
目录 XML-DTD DTD语句 基本声明语句 引用外部DTD DTD元素 四种元素类型 元素定义关键字 修饰符号 DTD中的属性 属性修饰 属性类型 DTD中的实体和符号 符号 坑 XML-DTD ...
- mysql:sql create database新建utf8mb4 数据库
create database sina default character set utf8mb4 collate utf8mb4_unicode_ci;或者是create database con ...
- Qt编写视频监控系统67-录像计划(支持64通道7*24录像设置)
一.前言 录像计划这个功能一直挂了很久,之前做的也都有保存视频文件功能,其中还分了三大种,第一种是手动开启和停止录像:第二种是按照指定时长比如10s保存文件:第三种是定时30分钟一个文件一直保存.这三 ...
- Qt编写地图综合应用4-仪表盘
一.前言 仪表盘在很多汽车和物联网相关的系统中很常用,最直观的其实就是汽车仪表盘,这个以前主要是机械的仪表,现在逐步改成了智能的带屏带操作系统的仪表,这样美观性和拓展性功能性大大增强了,上了操作系统的 ...
- [转]Linux系统下的GCC编译过程、使用命令详解(多文件编译、动态库、静态库)
Linux系统下的GCC编译过程.使用命令详解(多文件编译.动态库.静态库) [Linux]gcc简介+编译过程 翻译 搜索 复制
- IntelliJ IDEA打开Spring Booot项目并使用Maven导入依赖包时提示错误:Cannot resolve com.gexin.platform:gexin-rp-sdk-http:4.1.0.5
构建项目时报错: Cannot resolve com.gexin.platform:gexin-rp-sdk-http:4.1.1.4 gexin-rp-sdk-http:jar:4.1.1.4总 ...
- Eclipse导入并打开java项目,在“package ***;”左侧提示 Multiple markers at this line,或者在“import java.util.*”左侧提示The import java.util cannot be resolved。
Eclipse导入并打开java项目,在"package ***:"左侧提示 Multiple markers at this line,或者在"import java. ...