SQLServer之数据库语句优化

一切都是为了性能，一切都是为了业务

一、查询的逻辑执行顺序

(1)FROMleft_table

(3)join_typeJOINright_table(2)ONjoin_condition

(4)WHEREwhere_condition

(5)GROUPBYgroup_by_list

(6)WITH

(7)HAVINGhaving_condition

(8)SELECT(9)DISTINCT(11)top_specificationselect_list

(9)ORDERBYorder_by_list

标准的SQL的解析顺序为：

1子句组装来自不同数据源的数据

2子句基于指定的条件对记录进行筛选

3子句将数据划分为多个分组

4 (4)使用聚合函数进行计算

5 (5)使用HAVING子句筛选分组

6 (6)计算所有的表达式

7 (7)使用ORDERBY对结果集进行排序

二、执行顺序

1：对FROM子句中前两个表执行笛卡尔积生成虚拟表vt1

2对vt1表应用ON筛选器只有满足join_condition为真的行才被插入vt2

3：如果指定了OUTERJOIN保留表(preservedtable)中未找到的行将行作为外部行添加到vt2，生成t3，如果from包含两个以上表，则对上一个联结生成的结果表和下一个表重复执行步骤和步骤直接结束。

4：对vt3应用WHERE筛选器只有使where_condition为true的行才被插入vt4

5子句中的列列表对vt4中的行分组生成vt5

6：把超组(supergroups)插入vt6，生成vt6

7：对vt6应用HAVING筛选器只有使having_condition为true的组才插入vt7

8：处理select列表产生vt8

9：将重复的行从vt8中去除产生vt9

10的行按orderby子句中的列列表排序生成一个游标vc10

11：从vc10的开始处选择指定数量或比例的行生成vt11并返回调用者

看到这里，那么用过LinqtoSQL的语法有点相似啊？如果我们我们了解了SQLServer执行顺序，那么我们就接下来进一步养成日常SQL的好习惯，也就是在实现功能的同时有考虑性能的思想，数据库是能进行集合运算的工具，我们应该尽量的利用这个工具，所谓集合运算实际就是批量运算，就是尽量减少在客户端进行大数据量的循环操作，而用SQL语句或者存储过程代替。

三、只返回需要的数据

返回数据到客户端至少需要数据库提取数据、网络传输数据、客户端接收数据以及客户端处理数据等环节，如果返回不需要的数据，就会增加服务器、网络和客户端的无效劳动，其害处是显而易见的，避免这类事件需要注意：

A、横向来看

1 (1)不要写SELECT*的语句，而是选择你需要的字段。

2 (2)当在SQL语句中连接多个表时,请使用表的别名并把别名前缀于每个Column上。这样一来,就可以减少解析的时间并减少那些由Column歧义引起的语法错误。

如有表table1(ID,col1)和table2(ID,col2)SelectA.ID,A.col1,B.col2--SelectA.ID,col1,col2–不要这么写，不利于将来程序扩展fromtable1Ainnerjointable2BonA.ID=B.IDWhere…

B、纵向来看

1 (1)合理写WHERE子句，不要写没有WHERE的SQL语句。

2没有WHERE条件的用此替代。

四、尽量少做重复的工作

A、控制同一语句的多次执行，特别是一些基础数据的多次执行是很多程序员很少注意的。

B、减少多次的数据转换，也许需要数据转换是设计的问题，但是减少次数是程序员可以做到的。

C、杜绝不必要的子查询和连接表，子查询在执行计划一般解释成外连接，多余的连接表带来额外的开销。

D、合并对同一表同一条件的多次UPDATE，比如

UPDATEEMPLOYEESETFNAME='HAIWER'WHEREEMP_ID='VPA30890F'UPDATEEMPLOYEESETLNAME='YANG'WHEREEMP_ID='VPA30890F'

这两个语句应该合并成以下一个语句：

UPDATEEMPLOYEESETFNAME='HAIWER',LNAME='YANG'WHEREEMP_ID='VPA30890F'

E、UPDATE操作不要拆成DELETE操作+INSERT操作的形式，虽然功能相同，但是性能差别是很大的。

五、注意临时表和表变量的用

在复杂系统中，临时表和表变量很难避免，关于临时表和表变量的用法，需要注意：A、如果语句很复杂，连接太多，可以考虑用临时表和表变量分步完成。B、如果需要多次用到一个大表的同一部分数据，考虑用临时表和表变量暂存这部分数据。C、如果需要综合多个表的数据，形成一个结果，可以考虑用临时表和表变量分步汇总这多

个表的数据。D、其他情况下，应该控制临时表和表变量的使用。

E、关于临时表和表变量的选择，很多说法是表变量在内存，速度快，应该首选表变量，但是在实际使用中发现：

1 (1)主要考虑需要放在临时表的数据量，在数据量较多的情况下，临时表的速度反而更快。

2 (2)执行时间段与预计执行时间(多长)

F、关于临时表产生使用SELECTINTO和CREATETABLE+INSERTINTO的选择，一般情况下：SELECTINTO会比CREATETABLE+INSERTINTO的方法快很多，但是SELECTINTO会锁定TEMPDB的系统表SYSOBJECTS、SYSINDEXES、

SYSCOLUMNS，在多用户并发环境下，容易阻塞其他进程。所以我的建议是，在并发系统中，尽量使用CREATETABLE+INSERTINTO，而大数据量的单个语句使用中，使用SELECTINTO。

六、子查询的用法

子查询是一个SELECT查询，它嵌套在SELECT、INSERT、UPDATE、DELETE语句或其它子查询中。

任何允许使用表达式的地方都可以使用子查询，子查询可以使我们的编程灵活多样，可以用来实现一些特殊的功能。但是在性能上，往往一个不合适的子查询用法会形成一个性能瓶颈。如果子查询的条件中使用了其外层的表的字段，这种子查询就叫作相关子查询。

相关子查询可以用IN、NOTIN、EXISTS、NOTEXISTS引入。关于相关子查询，应该注意：

(1)NOTIN、NOTEXISTS的相关子查询可以改用LEFTJOIN代替写法。比如：

SELECTPUB_NAMEFROMPUBLISHERSWHEREPUB_IDNOTIN(SELECTPUB_IDFROMTITLESWHERETYPE='BUSINESS')

可以改写成：

SELECTA.PUB_NAMEFROMPUBLISHERSALEFTJOINTITLESBONB.TYPE

='BUSINESS'ANDA.PUB_ID=B.PUB_IDWHEREB.PUB_IDISNULL

比如NOTEXISTS：

SELECTTITLEFROMTITLESWHERENOTEXISTS(SELECTTITLE_IDFROMSALESWHERETITLE_ID=TITLES.TITLE_ID)

可以改写成：

SELECTTITLEFROMTITLESLEFTJOINSALESONSALES.TITLE_ID=TITLES.TITLE_IDWHERESALES.TITLE_IDISNULL

2）如果保证子查询没有重复，IN、EXISTS的相关子查询可以用INNERJOIN代替。比如：

SELECTPUB_NAMEFROMPUBLISHERSWHEREPUB_IDIN(SELECTPUB_IDFROMTITLESWHERETYPE='BUSINESS')

可以改写成：

SELECTA.PUB_NAME--SELECTDISTINCTA.PUB_NAMEFROMPUBLISHERSAINNERJOINTITLESBONB.TYPE='BUSINESS'ANDA.PUB_ID=B.PUB_ID

(3)IN的相关子查询用EXISTS代替，比如：

SELECTPUB_NAMEFROMPUBLISHERSWHEREPUB_IDIN(SELECTPUB_IDFROMTITLESWHERETYPE='BUSINESS')

可以用下面语句代替：

SELECTPUB_NAMEFROMPUBLISHERSWHEREEXISTS(SELECT1FROMTITLESWHERETYPE='BUSINESS'ANDPUB_ID=PUBLISHERS.PUB_ID)

4）不要用COUNT(*)的子查询判断是否存在记录，最好用LEFTJOIN或者EXISTS，比如有人写这样的语句：

SELECTJOB_DESCFROMJOBSWHERE(SELECTCOUNT(*)FROMEMPLOYEEWHEREJOB_ID=JOBS.JOB_ID)=0

应该改成：

SELECTJOBS.JOB_DESCFROMJOBSLEFTJOINEMPLOYEEONEMPLOYEE.JOB_ID=JOBS.JOB_IDWHEREEMPLOYEE.EMP_IDISNULLSELECTJOB_DESCFROMJOBSWHERE(SELECTCOUNT(*)FROMEMPLOYEEWHEREJOB_ID=JOBS.JOB_ID)

应该改成：

SELECTJOB_DESCFROMJOBSWHEREEXISTS(SELECT1FROMEMPLOYEEWHEREJOB_ID=JOBS.JOB_ID)

七：尽量使用索引

建立索引后，并不是每个查询都会使用索引，在使用索引的情况下，索引的使用效率也会有很大的差别。只要我们在查询语句中没有强制指定索引，索引的选择和使用方法是SQLSERVER的优化器自动作的选择，而它选择的根据是查询语句的条件以及相关表的统计信息，这就要求我们在写SQL语句的时候尽量使得优化器可以使用索引。为了使得优化器能高效使用索引，写语句的时候应该注意：

（1）不要对索引字段进行运算，而要想办法做变换，比如：SELECTIDFROMTWHERENUM/2=100应改为:SELECTIDFROMTWHERENUM=100*2

SELECTIDFROMTWHERENUM/2=NUM1如果NUM有索引应改为:SELECTIDFROMTWHERENUM=NUM1*2如果NUM1有索引则不应该改。

1（2）发现过这样的语句：SELECT年,月,金额FROM结余表WHERE100*年+月=2010*100+10应该改为：SELECT年,月,金额FROM结余表WHERE年=2010AND月=10

（3）不要对索引字段进行格式转换日期字段的例子：WHERECONVERT(VARCHAR(10),日期字段,120)='2010-07-15'应该改为WHERE日期字段〉='2010-07-15'AND日期字段'2010-07-16'ISNULL转换的例子：WHEREISNULL(字段,”)”应改为:WHERE字段”

WHEREISNULL(字段,”)=”不应修改WHEREISNULL(字段,’F’)=’T’应改为:WHERE字段=’T’WHEREISNULL(字段,’F’)’T’不应修改

2（4）不要对索引字段进行格式转换WHERELEFT(NAME,3)='ABC'或者WHERESUBSTRING(NAME,1,3)='ABC'应改为:WHERENAMELIKE’ABC%’日期查询的例子：WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期='2010-06-30'AND日期'2010-07-01'

WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:

WHERE日期'2010-06-30'WHEREDATEDIFF(DAY,日期,'2010-06-30')=0

应改为:WHERE日期'2010-07-01'WHEREDATEDIFF(DAY,日期,'2010-06-30')=0

应改为:

WHERE日期='2010-07-01'WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期='2010-06-30'

（5）不要对索引字段使用函数WHERELEFT(NAME,3)=’ABC’或者WHERESUBSTRING(NAME,1,3)=’ABC’应改为:WHERENAMELIKE'ABC%'

日期查询的例子：WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期='2010-06-30'AND日期'2010-07-01'

WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期'2010-06-30'

WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期'2010-07-01'

WHEREDATEDIFF(DAY,日期,'2010-06-30')=0

应改为:

WHERE日期='2010-07-01'WHEREDATEDIFF(DAY,日期,'2010-06-30')=0应改为:WHERE日期='2010-06-30'

（6）不要对索引字段进行多字段连接比如：

WHEREFAME+'.'+LNAME='HAIWEI.YANG'应改为:WHEREFNAME='HAIWEI'ANDLNAME='YANG'

八：多表连接的连接条件对索引的选择有着重要的意义，所以我们在写连接条件条件的时候需要特别注意。

A、多表连接的时候，连接条件必须写全，宁可重复，不要缺漏。

B、连接条件尽量使用聚集索引

C、注意ON、WHERE和HAVING部分条件的区别

ON是最先执行，WHERE次之，HAVING最后，因为ON是先把不符合条件的记录过滤后才进行统计，它就可以减少中间运算要处理的数据，按理说应该速度是最快的，WHERE也应该比HAVING快点的，因为它过滤数据后才进行SUM，在两个表联接时才用ON的，所以在一个表的时候，就剩下WHERE跟HAVING比较了。

(1)INNERJOIN

1注：RIGHTJOIN用LEFTJOIN替代)

2 CROSSJOIN

其它注意和了解的地方有：

A、在IN后面值的列表中，将出现最频繁的值放在最前面，出现得最少的放在最后面，减少判断的次数。B、注意UNION和UNIONALL的区别。–允许重复数据用UNIONALL好C、注意使用DISTINCT，在没有必要时不要用。D、TRUNCATETABLE与DELETE区别。E、减少访问数据库的次数。

还有就是我们写存储过程，如果比较长的话，最后用标记符标开，因为这样可读性很好，即使语句写的不怎么样，但是语句工整，C#有region，SQL我比较喜欢用的就是：

–startof查询在职人数SQL语句–endof

正式机器上我们一般不能随便调试程序，但是很多时候程序在我们本机上没问题，但是进正式系统就有问题，但是我们又不能随便在正式机器上操作，那么怎么办呢？我们可以用回滚来调试我们的存储过程或者是SQL语句，从而排错。

BEGINTRANUPDATEaSET字段=”ROLLBACK

作业存储过程我一般会加上下面这段，这样检查错误可以放在存储过程，如果执行错误回滚操作，但是如果程序里面已经有了事务回滚，那么存储过程就不要写事务了，这样会导致事务回滚嵌套降低执行效率，但是我们很多时候可以把检查放在存储过程里，这样有利于我们解读这个存储过程，和排错。

BEGINTRANSACTION

–事务回滚开始

–检查报错

IF(@@ERROR0)BEGIN--回滚操作ROLLBACKTRANSACTIONRAISERROR('删除工作报告错误',16,3)RETURNEND

–结束事务COMMITTRANSACTION