极致之处,精彩无限 - 优化了一半的SQL

编辑手记:RWP(Real World Performance)团队是全球最优秀的性能优化团队,他们的目标在于系统性能千倍的提升。感谢刘永甫专家的授权,他从RWP团队转入售后,多年专注于性能优化。我们将会拣选他在职业生涯中一些经典的优化案例跟大家分享。

某次在给某知名通讯设备供应商做性能优化,快接近尾声的时候,偶然发现一个不是很TOP的TOP sql(一般刘老师会收集AWR 的TOP 50 sql,默认只有大概20个)使用了Hint,而其他SQL基本上都没有使用hint,其中必有隐情。顺手分析一下 :

虽然SQL平均执行时间0.25秒,但是执行次数多,因此也在TOP50之列。

SQL语句

SELECT /*+PUSH_PRED(HS)*/* FROM DMD_BOQ_PLAN_HEADER_T DBPH, DMD_PAYMENT_UNIT_V HS, DMD_PAYMENT_UNIT_CONTROL_T PUC WHERE DBPH.PAYMENT_UNIT_ID = HS.PAYMENT_UNIT_ID AND HS.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID AND DBPH.BOQ_PLAN_HEADER_ID = :B1;

说明:其中 DMD_PAYMENT_UNIT_V是一个view。如下:

SELECT STAGE_ID  AS PAYMENT_UNIT_ID,......
 FROM HT_STAGES 
UNION ALL
SELECT DBT.CCM_BOQ_ID   AS PAYMENT_UNIT_ID,......
 FROM DMD_BOQ_T    DBT
 WHERE DBT.REGISTER_FLAG ='N';

VIEW使用的两个表转换成的PAYMENT_UNIT_ID字段的对应列(HT_STAGES.STAGE_ID和DMD_BOQ_T.CCM_BOQ_ID),都是选择性很好的列;SQL谓词条件使用的几个字段选择性也都非常好,字段上都有索引。

根据以上信息,这个SQL的执行时间,正常应该在1毫秒左右,而不应该是AWR报告中显示的250毫秒。

先来看执行计划:

时间主要消耗在ID=5的全表扫描上,按照正常的情况,这一步应该是最后完成,而且是应该使用DMD_PAYMENT_UNIT_CONTROL_T表PAYMENT_UNIT_ID字段上的索引。当前因为这两个表之间没有直接关联关系,这一步的操作相当于做了笛卡尔积,这不科学。ID=7的步骤是正确的。

我们再来看看没有使用hint的SQL执行计划:

这个执行计划问题更严重,因为没有做谓词推进(push_pred),view使用的两个表做了全表扫描,原来SQL使用push_pred的hint还是起到了重要的优化效果。只是仍没有解决DMD_PAYMENT_UNIT_CONTROL_T表的全表扫描问题,应该算是一个优化了一半的SQL。

尝试使用更多的hint来调整执行计划:

/*+PUSH_PRED(HS) leading(dbph hs puc) use_nl(hs) use_nl(puc) */ 仍然不起作用。 优化尝试1 改写SQL,强制将DBPH和HS放在一个内联视图里先做join(no_merge不能少),然后再与PUC做join,这个是完全等价的SQL: select * from (SELECT /*+ PUSH_PRED(HS) no_merge*/ hs.PAYMENT_UNIT_ID FROM DMD_BOQ_PLAN_HEADER_T DBPH, DMD_PAYMENT_UNIT_V HS WHERE DBPH.PAYMENT_UNIT_ID = HS.PAYMENT_UNIT_ID AND DBPH.BOQ_PLAN_HEADER_ID = :B1 ) hs1, DMD_PAYMENT_UNIT_CONTROL_T PUC where HS1.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID;

这样改动后,执行计划就完美了:

这个SQL的执行时间大概就是1ms。

有没有更好的优化方法?经过测试,答案是有的:

优化尝试2

根据等值传递原理 a.id=b.id and b.id=c.id 等价于 a.id=b.id and a.id=c.id

将 HS.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID

改成 DBPH.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID

即:

SELECT *

FROM DMD_BOQ_PLAN_HEADER_T DBPH,

DMD_PAYMENT_UNIT_V HS,

DMD_PAYMENT_UNIT_CONTROL_T PUC

WHERE DBPH.PAYMENT_UNIT_ID = HS.PAYMENT_UNIT_ID

AND DBPH.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID

--AND HS.PAYMENT_UNIT_ID = PUC.PAYMENT_UNIT_ID

AND DBPH.BOQ_PLAN_HEADER_ID = :B1;

经过这样的修改后,不用任何的hint,执行计划都是完美的。

这个案例应该是优化器的考虑不周所致,遇到这种情况,我们就需要考虑通过改写SQL来实现优化的目的。

原文发布于微信公众号 - 数据和云(OraNews)

原文发表时间:2017-05-08

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏CDA数据分析师

【干货】找不到适合自己的编程书?我自己动手写了一个热门编程书搜索网站(附PDF书单)

原作者 Vlad Wetzel 编译 CDA 编译团队 本文为 CDA 数据分析师原创作品,转载需授权 选择适合自己的编程书绝非易事,美国的程序员小哥根据国外著...

2626
来自专栏枕边书

见招拆招-PostgreSQL中文全文索引效率优化

前言 上文 使用PostgreSQL进行中文全文检索 中我使用 PostgreSQL 搭建完成了一套中文全文检索系统,对数据库配置和分词都进行了优化,基本的查询...

4758
来自专栏用户画像

mysql查询实例

select Sno as 学号,Sname as 姓名 from student;

1092
来自专栏猿人谷

【黑魔法】Covering Indexes、STRAIGHT_JOIN

今天给大家介绍两个黑魔法,这都是压箱底的法宝。大家在使用时,一定要弄清他们的适用场景及用法,用好了,就是一把开天斧,用不好那就是画蛇添足。自从看过耗子哥(左耳朵...

992
来自专栏数据库

关于女神SQLite的疑惑(2)

还是女神SQLite的话题,继续讨论有关她的种种常见疑惑。 1.问:女神SQLite是线程安全的吗? 1.答:SQLite是线程安全的,这点确凿无疑。但我要补充...

1948
来自专栏架构师之路

或许你不知道的10条SQL技巧

这几天在写索引,想到一些有意思的TIPS,希望大家有收获。 一、一些常见的SQL实践 (1)负向条件查询不能使用索引 select * from order w...

37112
来自专栏小俊博客

[测评]CBVPS(CanBesystems)香港NAT机器测评

3452
来自专栏逸鹏说道

大型.NET ERP系统的20条数据库设计规范

数据库设计规范是个技术含量相对低的话题,只需要对标准和规范的坚持即可做到。当系统越来越庞大,严格控制数据库的设计人员,并且有一份规范书供执行参考。在程序框架中,...

3356
来自专栏张戈的专栏

WordPress酷炫CSS3读者墙,排名按年度、本月、本周划分的小方法

WordPress 酷炫 CSS3 读者墙这个玩意一般不用我多说,大部分用 WordPress 的博主都了解过了,出自折子戏博客。 不过他这个读者墙的排行是按年...

3253
来自专栏andychai

MySQL模糊查询性能优化

根据模糊查找的业务场景,比对一下上面列出的6种条件,如果你的场景是全都要支持,并且是 大用户量, 接口qps高,海量的数据检索量,那就不要在数据库上做任何挣扎了...

1.4K6

扫码关注云+社区