sql性能优化浅谈
sql性能优化总结:
最近随着数据越来越多,数据库性能问题暴露的越来越严重。几百万,上千万,甚至过亿的数据处理速度会非常的慢。
下面对工作中遇到的问题做下总结,希望以后能对日后的工作有所帮助。
不同的sql语句有不同的性能问题,只有要找到性能差的原因,才能对症下药。
首先说下性能判断的方法:
一.性能分析器:Microsoft的SQL Profiler
Oracle的Audit和AWR ,oracle也可以用PLsql中的explain plan(黄色灯泡)来分析。
二.性能相关SQL语句:(目前先拿sql server 说,其他版本慢慢补充。)
- -- 建聚集索引
- CREATE CLUSTERED INDEX INDEX_Userid
ON T_UserInfo ( Userid) - -- 建非聚集索引
- CREATE NONCLUSTERED INDEX INDEX_Userid
ON T_UserInfo ( Userid) - -- 删除索引
- DROP INDEX T_UserInfo. INDEX_Userid
- -- 显示有关由 Transact-SQL 语句生成的磁盘活动量的信息
- SET STATISTICS IO
ON - -- 关闭有关由 Transact-SQL 语句生成的磁盘活动量的信息
- SET STATISTICS IO
OFF - -- 显示 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
- SET SHOWPLAN_ALL ON
- -- 关闭 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
- SET SHOWPLAN_ALL OFF
-- 建聚集索引
CREATE CLUSTERED INDEX INDEX_Userid ON T_UserInfo ( Userid)
-- 建非聚集索引
CREATE NONCLUSTERED INDEX INDEX_Userid ON T_UserInfo ( Userid)
-- 删除索引
DROP INDEX T_UserInfo. INDEX_Userid -- 显示有关由 Transact-SQL 语句生成的磁盘活动量的信息
SET STATISTICS IO ON
-- 关闭有关由 Transact-SQL 语句生成的磁盘活动量的信息
SET STATISTICS IO OFF
-- 显示 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
SET SHOWPLAN_ALL ON
-- 关闭 [ 返回有关语句执行情况的详细信息,并估计语句对资源的需求 ]
SET SHOWPLAN_ALL OFF
*注意:(扫盲高手跳过)聚集索引就是表存储的时候的顺序,一张表只能有一个聚集索引。非聚集索引就表存储的结构不是按索引结构存储的。
具体使用方法看sql server帮助说的很全了,这里总结SHOWPLAN_ALL需要注意的几点:
1.Index Seek(索引查找) :索引查找意味着查询优化器使用了数据表上的非聚集索引来查找数据。
性能通常会很快,尤其是当只有少数的数据行被返回时。
2.Clustered Index Seek:聚集索引查找。这指查询优化器使用了数据表上的聚集索引来查找数据,性能很快。
3.Clustered Index Scan:聚集索引扫描。 聚集索引扫描与表扫描相似,不同的是聚集索引扫描是在一个建有聚集索引的数据表上执行的。和一般的表扫描一样,聚集索引扫描可能表明存在效能问题。
上面3项是性能比较好快的,下面几项从性能上来说是不理想的,避免的越多性能越快:
1.Table Scan:表扫描。如果看到这个信息,就说明数据表上没有聚集索引,或者查询优化器没有使用索引来查找。
2.Index or table scans:索引或者表扫描。可能意味着需要更好的或者额外的索引。
3.Bookmark Lookups:书签查找。考虑修改当前的聚集索引,使用复盖索引,限制 SELECT 语句中的字段数量。
4.Filter:过滤。在WHERE从句中移除用到的任何函数,不要在 SQL 语句中包含视图,可能需要额外的索引。
5.Sort:排序。如果查询的数据本身就是按一定顺序排序的,或者查询结果对排序无要求,那就不需要排序。
写sql文的注意事项:
1.创建索引,在大量甚至海量数据的表里有索引检索的速度要比没有索引检索快上几个数量级。
2.视图,视图本身不能建立索引,但是视图可以应用引用表的索引,当引用表的字段结构未变化时。
3.IN , NOT IN ==>替换方案EXISTS, NOT EXISTS
尤其是NOT IN不能应用表的索引,建议不使用。在 JOIN 关联后 也最好不要使用IN.
但是如果是 IN (12,21,13,14) 这种还是可以使用, 这种用法比 OR ....OR...OR 要快一点儿。
4. <> , !=
不等于操作符是永远不会用到索引的,因此对它的处理只会产生全表扫描。
a!=0 改为 a>0 or a<0
a!=’’ 改为 a>’’
5. > 或者<
a>1 改为 a>=1 , b < 2 改为 b<=2;
这里涉及到索引的应用问题,利用>= 或 <=能够更好的应用索引。
6. WHERE 后的条件顺序
mysql 采用从左至右的顺序解析WHERE子句,那些可以过滤掉最大数量记录的条件写在WHERE子句的前面。
ORACLE 采用从右至左的顺序解析WHERE子句,那些可以过滤掉最大数量记录的条件写在WHERE子句的末尾。
7. GROUP BY
Group BY 后面跟的分组条件越多越慢,切忌不要无谓的添加分组条件。
8. 在sql文中转换类型会非常的慢 尽量不要使用 to_char, to_date 等函数。
9. SELECT子句中避免使用 *
WHERE exsits (select * from XX_table) ==> WHERE exsits (select
id from XX_table)
sql性能优化浅谈的更多相关文章
- 转://Oracle数据库升级后保障SQL性能退化浅谈
一.数据库升级后保障手段 为了保障从10.2.0.4版本升级到11.2.0.4版本更加平稳,我们事先采用了oracle性能分析器(SQL Performance Analyzer)来预测数据库的关键S ...
- App性能优化浅谈
前言 前段时间给公司的小伙伴们进行了关于app性能优化的技术分享.这里我稍微整理一下也给大家分享一下.关于性能优化这个话题非常大,涉及面能够非常广,也能够非常深入.本人能力有限,不会给大家讲特别难懂, ...
- web server性能优化浅谈
作者:ZhiYan,Jack47 转载请保留作者和原文出处 Update: 2018.8.8 在无锁小节增加了一些内容 性能优化,优化的东西一定得在主路径上,结合测量的结果去优化.不然即使性能再好,逻 ...
- MYSQL优化浅谈,工具及优化点介绍,mysqldumpslow,pt-query-digest,explain等
MYSQL优化浅谈 msyql是开发常用的关系型数据库,快速.稳定.开源等优点就不说了. 个人认为,项目上线,标志着一个项目真正的开始.从运维,到反馈,到再分析,再版本迭代,再优化… 这是一个漫长且考 ...
- pb传输优化浅谈
在正式切入今天要谈的优化之前,先碎碎念一些自己过去这几年的经历.很久没有登录过博客园了,今天也是偶然兴起打开上来看一下,翻看了下自己的随笔,最后一篇原创文章发布时间是2015年的4月,今天是2017年 ...
- SQL性能优化常见措施(Lock wait timeout exceeded)
SQL性能优化常见措施 目 录 1.mysql中explain命令使用 2.mysql中mysqldumpslow的使用 3.mysql中修改my.ini配置文件记录日志 4.mysql中如何加索引 ...
- SQL性能优化案例分析
这段时间做一个SQL性能优化的案例分析, 整理了一下过往的案例,发现一个比较有意思的,拿出来给大家分享. 这个项目是我在项目开展2期的时候才加入的, 之前一期是个金融内部信息门户, 里面有个功能是收集 ...
- SQL性能优化
引言: 以前在面试的过程中,总有面试官问道:你做过sql性能优化吗?对此,我的答复是没有.一次没有不是自己的错误,两次也不是,但如果是多次呢?今天痛下决心,把有关sql性能优化的相关知识总结一下,以便 ...
- 如何进行正确的SQL性能优化
在SQL查询中,为了提高查询的效率,我们常常采取一些措施对查询语句进行SQL性能优化.本文我们总结了一些优化措施,接下来我们就一一介绍. 1.查询的模糊匹配 尽量避免在一个复杂查询里面使用 LIKE ...
随机推荐
- 17.3.10--C语言运行的步骤
编译-->生成-->调试-->链接-->运行 编译就是:将你编写的C语言程序翻译成机器能识别运行的指令集 生成就是:根据编译完成的指令集制造出机器可以具体执行的指令序列 调试就 ...
- AddressUtils
package com.ruoyi.common.utils; import org.slf4j.Logger; import org.slf4j.LoggerFactory; import com. ...
- EXAM-2018-08-21
EXAM-2018-08-21 自己真的是菜的恐怖 D:Fence Building 欧拉公式:V-E+F=2 在平面中:V为顶点个数,E为边数,F为区域数 在简单几何体中:V为顶点个数,E为边数,F ...
- CentOS下图形界面安装_Orcaale 11g
1.安装说明 使用到的工具: 软件名称 版本 软件包 系统 centOS6.8 CentOS-6.8-x86_64-bin-DVD1.iso 数据库 ORACLE11g linux.x64_11gR2 ...
- 使用js/jquery动态提交表单数据到搜索引擎或者接口
现在一般需要用jquery等方式动态提交到某个接口,比如通过iframe <iframe id="mainIframe" name="mainIframe" ...
- Dcoker 部署Tomcat+redis+war
1.首先安装redis docker run –name my-redis -d redis 2.安装tomcat并启动 docker run -p 8383:8383 –name tomcat -v ...
- 2019-2020-1 20199324《Linux内核原理与分析》第六周作业
第五章 系统调用的三层机制(下) 1.给MenuOS增加命令 进入Linuxkernel目录下,强制删除当前menu目录,再重新克隆一个新版本的menu 进入menu,运行make roofts脚本就 ...
- dns bind记录
自建DNS服务, 使用的工具是bind, 当然也有其他更轻量的工具 yum -y install bind /etc/named.conf 监听端口和ip修改 默认监听127.0.0.1 其他机器无法 ...
- locate及find查找命令
在文件系统上查找符合条件的文件: 实现工具:locate,find locate: 依赖于事先构建好的索引库: 系统自动实现(周期性任务): 手动更新数 ...
- Linear Equations
4.1 Linear Equations with One Independent Variable