sql性能优化浅谈
sql性能优化总结:
最近随着数据越来越多,数据库性能问题暴露的越来越严重。几百万,上千万,甚至过亿的数据处理速度会非常的慢。
下面对工作中遇到的问题做下总结,希望以后能对日后的工作有所帮助。
不同的sql语句有不同的性能问题,只有要找到性能差的原因,才能对症下药。
首先说下性能判断的方法:
一.性能分析器:Microsoft的SQL Profiler
Oracle的Audit和AWR ,oracle也可以用PLsql中的explain plan(黄色灯泡)来分析。
二.性能相关SQL语句:(目前先拿sql server 说,其他版本慢慢补充。)
- -- 建聚集索引
- CREATE CLUSTERED INDEX INDEX_Userid
ON T_UserInfo ( Userid) - -- 建非聚集索引
- CREATE NONCLUSTERED INDEX INDEX_Userid
ON T_UserInfo ( Userid) - -- 删除索引
- DROP INDEX T_UserInfo. INDEX_Userid
- -- 显示有关由 Transact-SQL 语句生成的磁盘活动量的信息
- SET STATISTICS IO
ON - -- 关闭有关由 Transact-SQL 语句生成的磁盘活动量的信息
- SET STATISTICS IO
OFF - -- 显示 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
- SET SHOWPLAN_ALL ON
- -- 关闭 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
- SET SHOWPLAN_ALL OFF
-- 建聚集索引
CREATE CLUSTERED INDEX INDEX_Userid ON T_UserInfo ( Userid)
-- 建非聚集索引
CREATE NONCLUSTERED INDEX INDEX_Userid ON T_UserInfo ( Userid)
-- 删除索引
DROP INDEX T_UserInfo. INDEX_Userid -- 显示有关由 Transact-SQL 语句生成的磁盘活动量的信息
SET STATISTICS IO ON
-- 关闭有关由 Transact-SQL 语句生成的磁盘活动量的信息
SET STATISTICS IO OFF
-- 显示 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
SET SHOWPLAN_ALL ON
-- 关闭 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
SET SHOWPLAN_ALL OFF
*注意:(扫盲高手跳过)聚集索引就是表存储的时候的顺序,一张表只能有一个聚集索引。非聚集索引就表存储的结构不是按索引结构存储的。
具体使用方法看sql server帮助说的很全了,这里总结SHOWPLAN_ALL需要注意的几点:
1.Index Seek(索引查找) :索引查找意味着查询优化器使用了数据表上的非聚集索引来查找数据。
性能通常会很快,尤其是当只有少数的数据行被返回时。
2.Clustered Index Seek:聚集索引查找。这指查询优化器使用了数据表上的聚集索引来查找数据,性能很快。
3.Clustered Index Scan:聚集索引扫描。 聚集索引扫描与表扫描相似,不同的是聚集索引扫描是在一个建有聚集索引的数据表上执行的。和一般的表扫描一样,聚集索引扫描可能表明存在效能问题。
上面3项是性能比较好快的,下面几项从性能上来说是不理想的,避免的越多性能越快:
1.Table Scan:表扫描。如果看到这个信息,就说明数据表上没有聚集索引,或者查询优化器没有使用索引来查找。
2.Index or table scans:索引或者表扫描。可能意味着需要更好的或者额外的索引。
3.Bookmark Lookups:书签查找。考虑修改当前的聚集索引,使用复盖索引,限制 SELECT 语句中的字段数量。
4.Filter:过滤。在WHERE从句中移除用到的任何函数,不要在 SQL 语句中包含视图,可能需要额外的索引。
5.Sort:排序。如果查询的数据本身就是按一定顺序排序的,或者查询结果对排序无要求,那就不需要排序。
写sql文的注意事项:
1.创建索引,在大量甚至海量数据的表里有索引检索的速度要比没有索引检索快上几个数量级。
2.视图,视图本身不能建立索引,但是视图可以应用引用表的索引,当引用表的字段结构未变化时。
3.IN , NOT IN ==>替换方案EXISTS, NOT EXISTS
尤其是NOT IN不能应用表的索引,建议不使用。在 JOIN 关联后 也最好不要使用IN.
但是如果是 IN (12,21,13,14) 这种还是可以使用, 这种用法比 OR ....OR...OR 要快一点儿。
4. <> , !=
不等于操作符是永远不会用到索引的,因此对它的处理只会产生全表扫描。
a!=0 改为 a>0 or a<0
a!=’’ 改为 a>’’
5. > 或者<
a>1 改为 a>=1 , b < 2 改为 b<=2;
这里涉及到索引的应用问题,利用>= 或 <=能够更好的应用索引。
6. WHERE 后的条件顺序
mysql 采用从左至右的顺序解析WHERE子句,那些可以过滤掉最大数量记录的条件写在WHERE子句的前面。
ORACLE 采用从右至左的顺序解析WHERE子句,那些可以过滤掉最大数量记录的条件写在WHERE子句的末尾。
7. GROUP BY
Group BY 后面跟的分组条件越多越慢,切忌不要无谓的添加分组条件。
8. 在sql文中转换类型会非常的慢 尽量不要使用 to_char, to_date 等函数。
9. SELECT子句中避免使用 *
WHERE exsits (select * from XX_table) ==> WHERE exsits (select
id from XX_table)
sql性能优化浅谈的更多相关文章
- 转://Oracle数据库升级后保障SQL性能退化浅谈
一.数据库升级后保障手段 为了保障从10.2.0.4版本升级到11.2.0.4版本更加平稳,我们事先采用了oracle性能分析器(SQL Performance Analyzer)来预测数据库的关键S ...
- App性能优化浅谈
前言 前段时间给公司的小伙伴们进行了关于app性能优化的技术分享.这里我稍微整理一下也给大家分享一下.关于性能优化这个话题非常大,涉及面能够非常广,也能够非常深入.本人能力有限,不会给大家讲特别难懂, ...
- web server性能优化浅谈
作者:ZhiYan,Jack47 转载请保留作者和原文出处 Update: 2018.8.8 在无锁小节增加了一些内容 性能优化,优化的东西一定得在主路径上,结合测量的结果去优化.不然即使性能再好,逻 ...
- MYSQL优化浅谈,工具及优化点介绍,mysqldumpslow,pt-query-digest,explain等
MYSQL优化浅谈 msyql是开发常用的关系型数据库,快速.稳定.开源等优点就不说了. 个人认为,项目上线,标志着一个项目真正的开始.从运维,到反馈,到再分析,再版本迭代,再优化… 这是一个漫长且考 ...
- pb传输优化浅谈
在正式切入今天要谈的优化之前,先碎碎念一些自己过去这几年的经历.很久没有登录过博客园了,今天也是偶然兴起打开上来看一下,翻看了下自己的随笔,最后一篇原创文章发布时间是2015年的4月,今天是2017年 ...
- SQL性能优化常见措施(Lock wait timeout exceeded)
SQL性能优化常见措施 目 录 1.mysql中explain命令使用 2.mysql中mysqldumpslow的使用 3.mysql中修改my.ini配置文件记录日志 4.mysql中如何加索引 ...
- SQL性能优化案例分析
这段时间做一个SQL性能优化的案例分析, 整理了一下过往的案例,发现一个比较有意思的,拿出来给大家分享. 这个项目是我在项目开展2期的时候才加入的, 之前一期是个金融内部信息门户, 里面有个功能是收集 ...
- SQL性能优化
引言: 以前在面试的过程中,总有面试官问道:你做过sql性能优化吗?对此,我的答复是没有.一次没有不是自己的错误,两次也不是,但如果是多次呢?今天痛下决心,把有关sql性能优化的相关知识总结一下,以便 ...
- 如何进行正确的SQL性能优化
在SQL查询中,为了提高查询的效率,我们常常采取一些措施对查询语句进行SQL性能优化.本文我们总结了一些优化措施,接下来我们就一一介绍. 1.查询的模糊匹配 尽量避免在一个复杂查询里面使用 LIKE ...
随机推荐
- windows服务器搭建SVN[多项目设置方法]
https://tortoisesvn.net/downloads.html 根据系统版本进行下载,下载后正常一路正常安装. 第一.设置版本号仓库目录,比如:cdengine 第二.在cdengine ...
- 可视化---seaborn
变量说明 x,y,hue 数据集变量 变量名 date 数据集 数据集名 row,col 更多分类变量进行平铺显示 变量名 col_wrap 每行的最高平铺数 整数 estimator 在每个分类中进 ...
- 了解Kafka生产者
了解Kafka生产者 之前对kafka的整体架构有浅显的了解,这次正好有时间,准备深入了解一下kafka,首先先从数据的生产者开始吧. 生产者的整体架构 可以看到整个生产者进程主要由两个线程进 ...
- STL入门练习
题目练习地址https://vjudge.net/contest/310054#overview 看病要排队 http://acm.hdu.edu.cn/showproblem.php?pid ...
- 使用mha 构建mysql高可用碰到几个问题
根据网上配置,安装好mha ,建议到https://code.google.com/archive/p/mysql-master-ha/downloads 下载0.56版本 1.首先先确定各个主机之 ...
- ruoyi HttpUtils
package com.ruoyi.common.utils.http; import java.io.BufferedReader; import java.io.IOException; impo ...
- sqlserver 时间格式 取年月日时分
select substring( convert(varchar,getdate(),120),1,16)
- Opencv笔记(十五)——图像金字塔
参考文献 目标 学习图像金字塔 学习函数cv2.pyrUp()和cv2.pyrDown() 原理 当我们需要将图像转换到另一个尺寸的时候, 有两种可能,一种是放大图像,另一种是缩小图像.尽管在Open ...
- [学习笔记]set的使用
set默认进行升序排列,通过结构体可以改. 维护一个比主人公分数高的set 降序排列,比主人公高就进入set 比主人公低就不进去,或者在删除操作里删掉. 然后血的教训 https://blog.csd ...
- vue中axios的post请求使用form表单格式发送数据
vue使用插件qs实现 (qs 是一个增加了一些安全性的查询字符串解析和序列化字符串的库.) 在jquery中的ajax的方法已将此封装,所以不需要再次序列化 1. 安装 在项目中使用命令行工具输 ...