首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >记一次sql server 性能调优,查询从20秒至2秒

记一次sql server 性能调优,查询从20秒至2秒

作者头像
Java帮帮
发布2018-03-19 18:08:20
1.4K0
发布2018-03-19 18:08:20
举报
记一次sql server 性能调优,查询从20秒至2秒

一、需求

需求很简单,就是需要查询一个报表,只有1个表,数据量大约60万左右,但是中间有些逻辑。

先说明一下服务器配置情况:1核CPU、2GB内存、机械硬盘、Sqlserver 2008 R2、Windows Server2008 R2 SP1和阿里云的服务器,简单说就是阿里云最差的服务器。

1、原始表结构

非常简单的一张表,这次不讨论数据冗余和表字段的设计,如是否可以把Project和Baojian提出成一个表等等,这个是原始表结构,这个目前是没有办法改变的。

2、查询的sql语句为

select*
from(
select *,ROW_NUMBER()
OVER (ORDER BY sc desc) as rank  
from(
select *,
case when ( 40-(a.p*(
case when a.p > 0 then 1 
else -0.5 end)))<=30then 30 
else ( 40-(a.p*(
case when a.p > 0 then 1 
else -0.5 end)))end as sc   
from (
select * from (
select a.ProjectNumber, a.ProjectName, 
a.BaojianNumber, a.BaojianName, a.ToubiaoPerson,
sum(UnitPrice) as sumPrice, 
b.price as avgPrice, 
((sum(UnitPrice)-b.price)/nullif(b.price,0)*100) as p,
sum(case when UnitPrice>b.price then b.price 
else UnitPrice end )as pprice,
sum(case when UnitPrice>MaxPrice then 1 
else 0 end ) as countChao
from ToubiaoDetailTest1 a
join (
select ProjectNumber, ProjectName, 
BaojianNumber, BaojianName, avg(price) as price
from(
select * from(
select ProjectNumber, ProjectName, 
BaojianNumber, BaojianName, ToubiaoPerson, 
SUM(UnitPrice) as price,
SUM(case when UnitPrice>MaxPrice then 1 
else 0 end ) as countChao
from ToubiaoDetailTest1  
group BY ProjectNumber, ProjectName, BaojianNumber, 
BaojianName, ToubiaoPerson
) tt where tt.countChao = 0
) t group by ProjectNumber, ProjectName, 
BaojianNumber, BaojianName
) b on a.ProjectNumber=b.ProjectNumber and 
a.ProjectName=b.ProjectName and 
a.BaojianNumber=b.BaojianNumber and 
a.BaojianName=b.BaojianName
group by a.BaojianNumber, a.BaojianName, 
a.ProjectNumber, a.ProjectName, a.ToubiaoPerson, b.price    
) tt where tt.countChao=0
) a  
) b
) t   
order by rank 
}

此段sql语句主要的功能是:

1、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson分组,查询所有数据的sum(UnitPrice)   其中UnitPrice>MaxPrice的判断是为了逻辑,如果有一条数据满足,则此分组所有的数据不查询。

2、根据ProjectNumber, ProjectName, BaojianNumber, BaojianName 分组,查询所有数据的avg(price),以上两步主要就是为了查询根据ProjectNumber, ProjectName, BaojianNumber, BaojianName分组的avg(price)值。

3、然后根据逻辑获取相应的值、分数和按照分数排序分页等等操作。

二、性能调优

在未做任何优化之前,查询一次的时间大约为20秒左右。

1、建立索引

根据sql语句我们可以知道,会根据5个字段(ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson)进行分组聚合,所以尝试添加非聚集索引idx_calc。

在索引键列添加ProjectNumber, ProjectName, BaojianNumber, BaojianName, ToubiaoPerson。如图:

然后执行查询sql语句,发现执行时间已经减半了,只要10610毫秒

2、索引包含列

分析查询sql可以得知,我们需要计算的值只有UnitPrice和MaxPrice,所以想到把UnitPrice和MaxPrice添加到idx_calc的包含列中。如图

然后执行查询sql语句,发现执行时间再次减半,只要6313毫秒,现在已经从之前的20多秒优化成6秒多。

3、再次优化查询Sql

再次分析sql语句可以把计算所有数据的avg(price)语句暂时放置临时表(#temp_table)中,再计算其他值的时候直接从临时表中(#temp_table)获取数据。

然后执行查询sql语句,执行时间只有2323毫秒。

在硬件、表数据量和查询稍复杂的情况下,这样已经可以基本上满足查询需求了。

三、总结

经过三步:1、建立索引,2、添加包含列,3、用临时表。用三步可以把查询时间从20秒优化至2秒

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2017-07-26,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Java帮帮 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1、原始表结构
  • 2、查询的sql语句为
  • 二、性能调优
    • 1、建立索引
      • 2、索引包含列
        • 3、再次优化查询Sql
        • 三、总结
        相关产品与服务
        腾讯云 BI
        腾讯云 BI(Business Intelligence,BI)提供从数据源接入、数据建模到数据可视化分析全流程的BI能力,帮助经营者快速获取决策数据依据。系统采用敏捷自助式设计,使用者仅需通过简单拖拽即可完成原本复杂的报表开发过程,并支持报表的分享、推送等企业协作场景。
        领券
        问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档