SQL优化的20条军规
前言
作为一个写SQL的程序员,代码写得好不好是一回事,但SQL写得烂,性能拉胯,全公司都得为你的慢查询买单,尤其在大数据量表上,SQL写不好就是“内鬼”级别的错误。
今天不整那些虚的,直接来点硬货:20条SQL优化小技巧,每一条都能救你一命,关键是,我还给你配上代码例子,拿去直接用,希望对你会有所帮助。
我最近开源了一个基于 SpringBoot+Vue+uniapp 的商城项目,里面的技术亮点挺多的,欢迎访问和star。[https://gitee.com/dvsusan/susan_mall]
1. 避免SELECT *
别一上来就 SELECT *,你觉得这样写省事,但数据库得把整张表的每一列都给你搬过来,代价大得吓人。需要啥列写清楚,别偷懒。
-- 错误写法
SELECT * FROM users;
-- 正确写法
SELECT id, name, age FROM users;
优化原因:减少网络传输数据量,避免无用字段占内存。
最后说一句(求关注,别白嫖我)
如果这篇文章对您有所帮助,或者有所启发的话,帮忙关注一下我的同名公众号:苏三说技术,您的支持是我坚持写作最大的动力。
求一键三连:点赞、转发、在看。
关注公众号:【苏三说技术】,在公众号中回复:进大厂,可以免费获取我最近整理的10万字的面试宝典,好多小伙伴靠这个宝典拿到了多家大厂的offer。
2. WHERE字段要有索引
你写 WHERE 条件时,涉及到的字段要有索引。没索引,MySQL 就得一行行地扫描表,全表扫描慢得你怀疑人生。
-- 创建索引
CREATE INDEX idx_users_age ON users(age);
-- 使用索引查询
SELECT * FROM users WHERE age > 25;
优化原因:索引就像目录,能直接跳到你要的那页,而不是一本书从头翻到尾。
3. 用EXPLAIN分析SQL性能
写SQL前,别直接跑,先加个 EXPLAIN 看看执行计划。看啥?type 是不是 ALL,是不是走了全表扫描。如果有,赶紧改。
EXPLAIN SELECT * FROM users WHERE age > 25;
优化原因:清楚执行计划,知道SQL跑得是不是高效。
4. 避免WHERE里的函数操作
别在WHERE条件里对字段用函数,索引直接失效。
-- 错误写法
SELECT * FROM users WHERE YEAR(create_time) = 2023;
-- 正确写法
SELECT * FROM users WHERE create_time >= '2023-01-01' AND create_time < '2024-01-01';
优化原因:函数操作让索引失效,回表扫描浪费时间。
5. 避免OR条件,改用UNION
WHERE 里写了个 OR,可能导致两个字段的索引全失效。别用 OR,用 UNION 替代。
-- 错误写法
SELECT * FROM users WHERE age = 25 OR city = 'shenzhen';
-- 正确写法
SELECT * FROM users WHERE age = 25
UNION
SELECT * FROM users WHERE city = 'shenzhen';
优化原因:OR 会让索引失效,而 UNION 可以分别利用索引。
6. 优化LIMIT分页
LIMIT 用得好不好直接影响性能,特别是分页到 10000 页的时候,直接卡死你。改进方法是用 ID 或时间范围过滤。
-- 错误写法
SELECT * FROM users ORDER BY create_time LIMIT 10000, 10;
-- 正确写法
SELECT * FROM users WHERE id > 10000 ORDER BY id LIMIT 10;
优化原因:用范围过滤减少不必要的扫描。
7. 用覆盖索引
覆盖索引的意思是,查询的字段全在索引里,MySQL 不需要回表。
-- 创建覆盖索引
CREATE INDEX idx_users_age_name ON users(age, name);
-- 查询
SELECT name FROM users WHERE age > 25;
优化原因:只从索引获取数据,不用回表,提高查询速度。
8. 减少JOIN表数量
JOIN 太多表会让执行计划复杂化,数据量大的表用 JOIN,性能就拉了。
-- 复杂的多表JOIN
SELECT * FROM orders
JOIN users ON orders.user_id = users.id
JOIN products ON orders.product_id = products.id;
-- 优化:拆分查询
SELECT * FROM orders WHERE user_id IN (
SELECT id FROM users WHERE age > 25
);
优化原因:减少中间表的数据处理量,降低JOIN复杂度。
9. 使用批量插入
单条插入写多了,性能会被写锁拖垮,换成批量插入。
-- 错误写法
INSERT INTO users (id, name) VALUES (1, 'zhangsan');
INSERT INTO users (id, name) VALUES (2, 'lisi');
-- 正确写法
INSERT INTO users (id, name) VALUES (1, 'zhangsan'), (2, 'lisi');
优化原因:减少数据库连接和提交的次数。
10. GROUP BY前过滤数据
GROUP BY 本质上是对结果排序分组,数据量大时效率感人。先用 WHERE 把数据量缩小。
-- 错误写法
SELECT age, COUNT(*) FROM users GROUP BY age;
-- 正确写法
SELECT age, COUNT(*) FROM users WHERE age > 25 GROUP BY age;
优化原因:减少GROUP BY处理的数据量。
11. LIKE查询优化
模糊查询用 %xxx% 的时候,索引没了,直接全表扫描。改成前缀匹配,或者用全文索引。
-- 前缀匹配
SELECT * FROM users WHERE name LIKE 'zhang%';
-- 全文索引
CREATE FULLTEXT INDEX idx_name ON users(name);
SELECT * FROM users WHERE MATCH(name) AGAINST('zhang');
优化原因:用索引提高查询效率。
12. 避免大字段频繁查询
TEXT 和 BLOB 这种大字段会拖累查询性能,把它们单独拆到一张表。
-- 原表
CREATE TABLE users (
id INT PRIMARY KEY,
name VARCHAR(50),
profile TEXT
);
-- 拆表
CREATE TABLE user_profiles (
user_id INT PRIMARY KEY,
profile TEXT
);
优化原因:减少主表查询时的大字段负担。
13. 定期清理无用数据
表里垃圾数据太多,索引也跟着膨胀,查询性能直线下降。
-- 定期清理历史数据
DELETE FROM logs WHERE create_time < '2022-01-01';
优化原因:保持表轻量化,避免数据膨胀。
14. 用分区表优化大数据表
分区表是大数据量优化的利器,把数据按范围分成多个分区。
CREATE TABLE orders (
id INT NOT NULL,
order_date DATE NOT NULL
) PARTITION BY RANGE (YEAR(order_date)) (
PARTITION p2022 VALUES LESS THAN (2023),
PARTITION p2023 VALUES LESS THAN (2024)
);
优化原因:查询只扫描一个分区,而不是整张表。
15. 索引字段选用低基数的字段
基数低的字段(比如性别)用索引没意义,能用组合索引就用。
-- 错误:性别字段加索引
CREATE INDEX idx_gender ON users(gender);
-- 正确:性别+年龄组合索引
CREATE INDEX idx_gender_age ON users(gender, age);
优化原因:避免低基数索引浪费存储。
16. 控制表字段数量
表字段太多会让数据表臃肿,查询性能也会变差。合理拆分表。
17. 用事务优化批量更新
大批量更新用事务,可以减少锁竞争。
START TRANSACTION;
UPDATE users SET age = age + 1 WHERE age > 25;
COMMIT;
18. 用查询缓存
MySQL 有查询缓存机制,适合静态数据高频查询场景。
-- 开启查询缓存
SET GLOBAL query_cache_size = 1048576;
SELECT SQL_CACHE * FROM users WHERE age > 25;
19. 用PreparedStatement
预编译可以提高性能,还能防止 SQL 注入。
20. 定期优化表
表用了很久会有碎片,定期优化表能提高性能。
OPTIMIZE TABLE users;
总结
SQL 优化是个手艺活,写好 SQL 就能少掉无数锅,尤其是团队开发时,一个烂 SQL 能拖死整个项目。
这 20 条技巧别只看一遍,拿着自己的查询多实践,别等线上掉链子才后悔!
SQL优化的20条军规的更多相关文章
- Yahoo前端优化的35条军规
摘要:无论是在工作中,还是在面试中,web前端性能的优化都是很重要的,那么我们进行优化需要从哪些方面入手呢?可以遵循雅虎的前端优化34条军规,不过现在已经是35条了,所以可以说是雅虎前端优化的35条军 ...
- Oracle SQL性能优化的40条军规
1. SQL语句执行步骤 语法分析> 语义分析> 视图转换 >表达式转换> 选择优化器 >选择连接方式 >选择连接顺序 >选择数据的搜索路径 >运行“执 ...
- MySQL性能优化的20条经验
今天,数据库的操作越来越成为整个应用的性能瓶颈了,这点对于Web应用尤其明显.关于数据库的性能,这并不只是DBA才需要担心的事,而这更是我 们程序员需要去关注的事情.当我们去设计数据库表结构,对操作数 ...
- MySQL性能优化的20+条经验
1. 为查询缓存优化你的查询 大多数的MySQL服务器都开启了查询缓存.这是提高性最有效的方法之一,而且这是被MySQL的数据库引擎处理的.当有很多相同的查询被执行了多次的时候,这些查询结果会被放到一 ...
- Yahoo关于性能优化的N条军规
一. Yahoo的军规条例: 谨记:80%-90%的终端响应时间是花费在下载页面中的图片,样式表,脚本,flash等:详细的解释来这里查:http://developer.yahoo.com/perf ...
- 基于Yahoo网站性能优化的34条军规及自己的见解
1.尽量减少HTTP请求次数 终端用户响应的时间中,有80%用于下载各项内容,这部分时间包括下载页面中的图像.样式表.脚本.Flash等.通过减少页面中的元素可以减少HTTP请求的次数,这是提高网页速 ...
- 雅虎(yahoo)前端优化十四条军规
第一条.尽可能的减少 HTTP 的请求数 (Make Fewer HTTP Requests ) http请求是要开销的,想办法减少请求数自然可以提高网页速度.常用的方法,合并css,js(将一个页面 ...
- Yahoo前端优化十四条军规
相信互联网已经越来越成为人们生活中不可或缺的一部分.Ajax,flex等等富客户端的应用使得人们越加“幸福”地体验着许多原先只能在C/S实 现的功能. 比如Google机会已经把最基本的office应 ...
- Yahoo网站性能优化的34条军规
1.尽量减少HTTP请求次数 终端用户响应的时间中,有80%用于下载各项内容,这部分时间包括下载页面中的图像.样式表.脚本.Flash等.通过减少页面中的元素可以减少HTTP请求的次数,这是提高网页速 ...
- Python性能优化的20条建议 (转载)
优化算法时间复杂度 算法的时间复杂度对程序的执行效率影响最大,在Python中可以通过选择合适的数据结构来优化时间复杂度,如list和set查找某一个元素的时间复杂度分别是O(n)和O(1).不同的场 ...
随机推荐
- Blazor 组件库 BootstrapBlazor 中Circle组件介绍
组件介绍 Circle进度环组件,是一个图表类组件.一般有两种用途: 显示某项任务进度的百分比. 统计某些指标的占比. 它的样子如下: 它的代码如下: <Circle Width="2 ...
- Codeforces Round #826 (Div
Codeforces Round #826 (Div. 3) Minimize the Thickness 给定数组a,要求将数组a分成若干个子序列,并且使得每个子序列中的元素和都相等,设这些子序列中 ...
- SPRING 动态注册BEAN
场景 有些情况下,不能直接使用BEAN的方式: @Bean(name = "storage") public DataSourceProxy storageDataSourcePr ...
- Consul health check pass by Spring security filter
https://stackoverflow.com/questions/35079930/consul-health-check-pass-by-spring-security-filter By d ...
- JVM简介—3.JVM的执行子系统
大纲 1.Class文件结构 2.Class文件格式概述 3.Class文件格式详解 4.字节码指令 5.类的生命周期和初始化 6.类加载的全过程 7.类加载器 8.双亲委派模型 9.栈桢详解 11. ...
- Qt开源作品4-网络调试助手
一.前言 网络调试助手和串口调试助手是一对的,用Qt开发项目与硬件通信绝大部分都是要么串口通信(RS232 RS485 Modbus等),要么就是网络通信(TCP UDP HTTP等),所以一旦涉及到 ...
- 使用Maven客户端从Maven中心仓库下载到本地的jar包的默认存储位置及远程仓库
从Maven中心仓库下载到本地的jar包的默认存放在"${user.home}/.m2/repository"中,${user.home}表示当前登录系统的用户目录(如" ...
- AI实战营第二期 | 环境配置及安装
AI实战营第二期 | 环境配置及安装 强烈推荐使用 mim 来管理 OpenMMLab repo OpenMMLab repo 不要 mim 和 pip 混用 OpenMMLab 1.0 和 Open ...
- [AI] 基于大模型的AI搜索引擎
概述:基于大模型的AI搜索引擎 ∈ 大模型智能体应用 AI搜索引擎的架构与组成 用户层:用户输入问题/关键词 Agent层: 用户的输入(当前和历史) + 问题提问模板 => 标准的问题 ... ...
- FileGDB代码示例
FileGDB代码示例 1. 读取FileGDB图层 1.1 实现思路 graph TD A[注册OGR] --> B[设置中文路径支持] B --> C[打开数据驱动] C --> ...