rownum导致sql不能进行谓词推入
背景
案件(13405_RI-再保结算查询导出太慢),造成性能慢的原因是执行以下sql时,每次执行平均需要消耗
2秒,画面上,点击一次导出按钮,就会发起数以百记的调用。
SQL执行代码段
select * from t_policy_payment_writeoff where policysn = 'PB12345';
t_policy_payment_writeoff为视图,其代码为:
create or replace view t_policy_payment_writeoff as
select rownum as id, t."WRITEOFFAMOUT",t."POLICYSN"
from (
select sum(b.realamount) writeoffamout, b.custseq policysn
--保费回写视图
from ciod_bp.mm_writeoutstatus_to a, ciod_bp.mm_writeout_to b
where a.id = b.id
and a.datasource = 'RI'
and a.status = '99'
and a.writeouttype = '1' --回写成功的..
group by b.custseq
union all
--分入转分出的业务,分出的账单找对应的分入账单的保费
select max(cat_parent.acc_writeoffsum) writeoffamout, fin.policysn
from ciod_ri.account_catalog cat_self,
ciod_ri.account_catalog cat_parent,
ciod_ri.ri_fac_cont_reins_fin fin
where cat_self.premium_bill_no = cat_parent.bill_no
and cat_parent.bill_no = fin.statement_no
and cat_self.retrocession_flag = 'T'
and cat_parent.acc_writeoffsum <> 0
group by fin.policysn
) t
;
SQL执行计划为
Plan hash value: 3741877562
------------------------------------------------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes |TempSpc| Cost (%CPU)| Time |
------------------------------------------------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 458K| 64M| | 27972 (2)| 00:05:36 |
|* 1 | VIEW | T_POLICY_PAYMENT_WRITEOFF | 458K| 64M| | 27972 (2)| 00:05:36 |
| 2 | COUNT | | | | | | |
| 3 | VIEW | | 458K| 59M| | 27972 (2)| 00:05:36 |
| 4 | UNION-ALL | | | | | | |
| 5 | HASH GROUP BY | | 458K| 24M| 59M| 23812 (2)| 00:04:46 |
|* 6 | HASH JOIN | | 458K| 24M| 12M| 17447 (2)| 00:03:30 |
|* 7 | TABLE ACCESS FULL | MM_WRITEOUTSTATUS_TO | 458K| 7159K| | 2938 (2)| 00:00:36 |
| 8 | TABLE ACCESS FULL | MM_WRITEOUT_TO | 1241K| 48M| | 10757 (2)| 00:02:10 |
| 9 | HASH GROUP BY | | 795 | 81090 | | 4161 (1)| 00:00:50 |
|* 10 | HASH JOIN | | 795 | 81090 | | 4160 (1)| 00:00:50 |
| 11 | NESTED LOOPS | | 795 | 38955 | | 3683 (1)| 00:00:45 |
|* 12 | TABLE ACCESS FULL | ACCOUNT_CATALOG | 724 | 2896 | | 2234 (2)| 00:00:27 |
|* 13 | TABLE ACCESS BY INDEX ROWID| ACCOUNT_CATALOG | 1 | 45 | | 2 (0)| 00:00:01 |
|* 14 | INDEX UNIQUE SCAN | PK_ACCOUNT_CATALOG | 1 | | | 1 (0)| 00:00:01 |
| 15 | TABLE ACCESS FULL | RI_FAC_CONT_REINS_FIN | 93390 | 4833K| | 475 (2)| 00:00:06 |
------------------------------------------------------------------------------------------------------------------------
Predicate Information (identified by operation id):
---------------------------------------------------
1 - filter("POLICYSN"='PB12345')
6 - access("A"."ID"="B"."ID")
7 - filter("A"."WRITEOUTTYPE"='1' AND "A"."DATASOURCE"='RI' AND "A"."STATUS"='99')
10 - access("CAT_PARENT"."BILL_NO"="FIN"."STATEMENT_NO")
12 - filter("CAT_SELF"."PREMIUM_BILL_NO" IS NOT NULL AND "CAT_SELF"."RETROCESSION_FLAG"='T')
13 - filter("CAT_PARENT"."ACC_WRITEOFFSUM"<>0)
14 - access("CAT_SELF"."PREMIUM_BILL_NO"="CAT_PARENT"."BILL_NO")
分析
根据执行计划中,ID=7与ID=15,MM_WRITEOUTSTATUS_TO与RI_FAC_CONT_REINS_FIN 是全表扫描方式去访问表。
谓词条件是 where policysn = 'PB12345';
然后我们可以在MM_WRITEOUTSTATUS_TO表的字段CUSTSEQ建立索引
RI_FAC_CONT_REINS_FIN表的字段POLICYSN建立索引,使其能进行谓词推入,并进行索引访问。
但是视图t_policy_payment_writeoff 有rownum 字段,会阻止进行谓词推入,所以我们可以改写该视图。
优化
1)增加索引
create index CIOD_BP.IDX_CUSTSEQ_1 on CIOD_BP.MM_WRITEOUT_TO (CUSTSEQ);
create index ciod_ri.IDX_POLICYSN_1 on ciod_ri.RI_FAC_CONT_REINS_FIN (POLICYSN);
2)改写视图,去掉rownum as id 字段
create or replace view t_policy_payment_writeoff as
select t."WRITEOFFAMOUT",t."POLICYSN"
from (
select sum(b.realamount) writeoffamout, b.custseq policysn
--保费回写视图
from ciod_bp.mm_writeoutstatus_to a, ciod_bp.mm_writeout_to b
where a.id = b.id
and a.datasource = 'RI'
and a.status = '99'
and a.writeouttype = '1' --回写成功的..
group by b.custseq
union all
--分入转分出的业务,分出的账单找对应的分入账单的保费
select max(cat_parent.acc_writeoffsum) writeoffamout, fin.policysn
from ciod_ri.account_catalog cat_self,
ciod_ri.account_catalog cat_parent,
ciod_ri.ri_fac_cont_reins_fin fin
where cat_self.premium_bill_no = cat_parent.bill_no
and cat_parent.bill_no = fin.statement_no
and cat_self.retrocession_flag = 'T'
and cat_parent.acc_writeoffsum <> 0
group by fin.policysn
) t
3)原sql改成
select rownum as id,b.* from t_policy_payment_writeoff b where policysn = 'PB12345';
#执行计划
----------------------------------------------------------------------------------------------------------
| Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time |
----------------------------------------------------------------------------------------------------------
| 0 | SELECT STATEMENT | | 2 | 270 | 2252 (2)| 00:00:28 |
| 1 | VIEW | | 2 | 270 | 2252 (2)| 00:00:28 |
| 2 | UNION-ALL | | | | | |
| 3 | SORT GROUP BY NOSORT | | 1 | 57 | 11 (0)| 00:00:01 |
|* 4 | TABLE ACCESS BY INDEX ROWID | MM_WRITEOUTSTATUS_TO | 1 | 16 | 3 (0)| 00:00:01 |
| 5 | NESTED LOOPS | | 2 | 114 | 11 (0)| 00:00:01 |
| 6 | TABLE ACCESS BY INDEX ROWID| MM_WRITEOUT_TO | 2 | 82 | 5 (0)| 00:00:01 |
|* 7 | INDEX RANGE SCAN | IDX_CUSTSEQ_1 | 2 | | 3 (0)| 00:00:01 |
|* 8 | INDEX RANGE SCAN | IDX_WRITEOUTSTATUS_1 | 1 | | 2 (0)| 00:00:01 |
| 9 | SORT GROUP BY NOSORT | | 1 | 102 | 2241 (2)| 00:00:27 |
|* 10 | HASH JOIN | | 1 | 102 | 2241 (2)| 00:00:27 |
| 11 | NESTED LOOPS | | 2 | 196 | 7 (0)| 00:00:01 |
| 12 | TABLE ACCESS BY INDEX ROWID| RI_FAC_CONT_REINS_FIN | 2 | 106 | 3 (0)| 00:00:01 |
|* 13 | INDEX RANGE SCAN | IDX_POLICYSN_1 | 2 | | 1 (0)| 00:00:01 |
|* 14 | TABLE ACCESS BY INDEX ROWID| ACCOUNT_CATALOG | 1 | 45 | 2 (0)| 00:00:01 |
|* 15 | INDEX UNIQUE SCAN | PK_ACCOUNT_CATALOG | 1 | | 1 (0)| 00:00:01 |
|* 16 | TABLE ACCESS FULL | ACCOUNT_CATALOG | 724 | 2896 | 2234 (2)| 00:00:27 |
----------------------------------------------------------------------------------------------------------
Predicate Information (identified by operation id):
---------------------------------------------------
4 - filter("A"."WRITEOUTTYPE"='1' AND "A"."DATASOURCE"='RI' AND "A"."STATUS"='99')
7 - access("B"."CUSTSEQ"='PB12345')
8 - access("A"."ID"="B"."ID")
10 - access("CAT_SELF"."PREMIUM_BILL_NO"="CAT_PARENT"."BILL_NO")
13 - access("FIN"."POLICYSN"='PB12345')
14 - filter("CAT_PARENT"."ACC_WRITEOFFSUM"<>0)
15 - access("CAT_PARENT"."BILL_NO"="FIN"."STATEMENT_NO")
16 - filter("CAT_SELF"."PREMIUM_BILL_NO" IS NOT NULL AND "CAT_SELF"."RETROCESSION_FLAG"='T')
优化后
SQL运行时间降至:0.034s
rownum导致sql不能进行谓词推入的更多相关文章
- sparkSQL将谓词推入kudu引擎
kudu之所以执行非常快速,可以用来替代HDFS和Hbase等,一个主要原因是,我们可以将普通SQL中的谓词推入kudu引擎,这样kudu查询数据会变的非常快: 将谓词评估推入Kudu引擎可以提高性能 ...
- 最新版SEMCMS_PHP_3.5 过滤不严导致sql注入
一.漏洞分析 在分析过程中看到网上已经有人发现semcms V2.4存在过滤不严导致sql注入的漏洞,不知道咋还没改,而且最新版过滤的关键字更少了. 首先查看首页文件index.php的代码 < ...
- 【转】导致SQL执行慢的原因
索引对大数据的查询速度的提升是非常大的,Explain可以帮你分析SQL语句是否用到相关索引. 索引类似大学图书馆建书目索引,可以提高数据检索的效率,降低数据库的IO成本.MySQL在300万条记录左 ...
- 服务器重启可能会导致SQL Server中部分数据库变为single user mode
今天检查公司生产服务器的SQL Server数据库,惊讶的发现有三个生产数据库变为了single user mode.奇怪的是没有任何人和程序执行过SQL语句将这三个数据库设置为single user ...
- Drupal V7.3.1 框架处理不当导致SQL注入
这个漏洞本是2014年时候被人发现的,本着学习的目的,我来做个详细的分析.漏洞虽然很早了,新版的Drupal甚至已经改变了框架的组织方式.但是丝毫不影响对于漏洞的分析.这是一个经典的使用PDO,但是处 ...
- 导致SQL执行慢的原因
索引对大数据的查询速度的提升是非常大的,Explain可以帮你分析SQL语句是否用到相关索引. 索引类似大学图书馆建书目索引,可以提高数据检索的效率,降低数据库的IO成本.MySQL在300万条记录左 ...
- 修改Windows帐户密码,导致Sql Server 2000无法启动
修改Windows帐户密码,导致Sql Server 2000无法启动. --现象以管理员或同等权限用户登录 Windows XP,建立 Sql Server 2000 数据库.之后,在修改此 Win ...
- 12.1.0.2自适应特性导致SQL性能下降
背景介绍 在升级到12.1.0.2.0数据库版本后,在使用12c中引入的自适应特性默认配置的情况下,可能引起SQL性能的下降. 问题现象升级到12.1.0.2.0后,SQL语句性能可能出现下降. 影响 ...
- dedecms SESSION变量覆盖导致SQL注入漏洞修补方案
dedecms的/plus/advancedsearch.php中,直接从$_SESSION[$sqlhash]获取值作为$query带入SQL查询,这个漏洞的利用前提是session.auto_st ...
随机推荐
- HDU1253:胜利大逃亡
传送门 题意 逃离迷宫 分析 用优先队列和队列都可以,但是我vis数组写在取队列首节点就MLE了,放在放入节点的地方就ac了,看来是一种固定写法,在放入节点的地方判断,可以防止放入无效点到队列,防止队 ...
- hdu1115【多边形求重心模板】
1.质量集中在顶点上.n个顶点坐标为(xi,yi),质量为mi,则重心(∑( xi×mi ) / ∑mi, ∑( yi×mi ) / ∑mi) 2.质量分布均匀.这个题就是这一类型,算法和上面的不同. ...
- bzoj 4817: [Sdoi2017]树点涂色【树链剖分+LCT】
非常妙的一道题. 首先对于操作一"把点x到根节点的路径上所有的点染上一种没有用过的新颜色",长得是不是有点像LCT中的access操作?进而发现,如果把同一颜色的点连起来作为LCT ...
- 【原创】《从0开始学RocketMQ》—集群搭建
用两台服务器,搭建出一个双master双slave.无单点故障的高可用 RocketMQ 集群.此处假设两台服务器的物理 IP 分别为:192.168.50.1.192.168.50.2. 内容目录 ...
- [转]Boosting
1 Boosting算法的起源 Boosting方法是一种用来提高弱分类算法准确度的方法,这种方法通过构造一个预测函数系列,然后以一定的方式将他们组合成一个预测函数.Boosting是一种提高任意给定 ...
- _bzoj2002 [Hnoi2010]Bounce 弹飞绵羊【分块】
传送门:http://www.lydsy.com/JudgeOnline/problem.php?id=2002 见一周目记录:http://www.cnblogs.com/ciao-sora/p/6 ...
- 【洛谷3822】[NOI2017] 整数(线段树压位)
题目: 洛谷 3822 分析: 直接按题意模拟,完了. 将每次加 / 减拆成不超过 \(32\) 个对单独一位的加 / 减. 考虑给一个二进制位(下称「当前位」)加 \(1\) 时,如果这一位本来就是 ...
- 图论/暴力 Codeforces Beta Round #94 (Div. 2 Only) B. Students and Shoelaces
题目传送门 /* 图论/暴力:这是个连通的问题,每一次把所有度数为1的砍掉,把连接的点再砍掉,总之很神奇,不懂:) */ #include <cstdio> #include <cs ...
- Service官方教程(6)Bound Services主要用来实现通信服务,以及3种实现通信的方案简介。
1.Bound Services A bound service is the server in a client-server interface. A bound service allows ...
- C# PropertyInfo(官网)
using System; using System.Reflection; class Module1 { public static void Main() { // This variable ...