以前总是追求新东西,发现基础才是最重要的,今年主要的目标是精通SQL查询和SQL性能优化。 本系列【T-SQL基础】主要是针对T-SQL基础的总结。...(3)T-SQL支持三种集合运算:并集(UNION)、交集(INTERSECT)、差集(EXCEPT) 2.语法 集合运算的基本格式: 输入的查询1 输入的查询2 [ORDER BY]...BY字句); (4)两个查询 必须包含相同的列数; (5)相应列必须具有兼容的数据类型。...2)UNION 会删除重复行,所以它的结果就是集合; (3)相同的行在结果中只出现一次。...(3)EXCEPT 会删除重复行,所以它的结果就是集合; (4)EXCEPT是不对称的,差集的结果取决于两个查询的前后关系。 (5)相同的行在结果中只出现一次。
以前总是追求新东西,发现基础才是最重要的,今年主要的目标是精通SQL查询和SQL性能优化。 本系列【T-SQL基础】主要是针对T-SQL基础的总结。...在逻辑上,子查询会为每个外部行单独计算一次。 标量子查询:返回单个值的子查询。标量子查询可以出现在外部查询中期望使用单个值的任何地方。 多值子查询:在一个列中 为什么要使用子查询?...,它的返回值不能超过一个,如果标量子查询返回了多个值,在运行时则可能会失败。...数据库引擎对两种查询的解释有时候是一样的,而在另外一些情况下,对二者的解释则是不同的。可以先用一种查询解决问题,如果性能不行,再尝试用联接替代子查询,或用子查询替代联接。...3.子查询之distinct关键字 当我们想要剔除掉子查询中的重复值时,会想到在子查询中不必指定distinct关键字,其实是没有必要的,因为数据库引擎会帮助我们删除重复的值,而不用我们显示指定distinct
CTE 能改善代码的可读性(以及可维护性),且不会有损其性能。此外,与早期版本的 SQL Server 相比,它们使得用 T-SQL 编写递归代码简单了许多。 ...要创建派生表,在由括号包围的 FROM 子句中移动 SELECT 语句即可。接着就能像表或视图一样查询或者联接它。图 2 中的代码解决的查询与图 1 所解决的相同,但使用的是派生表而不是视图。...本章节描述了 CTE 的适用情况,以及在 CTE 内什么是可以使用的,什么是不可以使用的。对于初学者来说,可以在 T-SQL 批处理、用户自定义函数、存储过程、触发器或视图中创建并使用 CTE。...第二个查询定义,即递归成员,定义了一个返回与定位点成员相同的列和数据类型的查询。递归成员还检索接下来将被用于递归回调到 CTE 的值。查询的结果通过 UNION 语句结合在一起。...结束语 比起那些在查询中使用复杂的派生表或引用那些在 T-SQL 批处理外部定义的视图的方案,CTE 使得编写 T-SQL 更具可读性。
阅读目录 概述: 一、事务 二、锁 三、阻塞 三、隔离级别 四.死锁 以前总是追求新东西,发现基础才是最重要的,今年主要的目标是精通SQL查询和SQL性能优化。...【T-SQL基础】01.单表查询-几道sql查询题 【T-SQL基础】02.联接查询 【T-SQL基础】03.子查询 【T-SQL基础】04.表表达式-上篇 【T-SQL基础】04.表表达式-下篇 【T-SQL...--------------------------------------------- 【T-SQL性能调优】01.索引优化 【T-SQL性能调优】02.执行计划 【T-SQL性能调优】03.死锁分析...fileid与sys.databases_files 目录视图中的file_id列相匹配 例子: 在查询视图sys.dm_tran_locks的时候有一行的resource_description...ID锁了 (2)查询出对资源授予或正在等待的锁模式 (3)查询出被锁定资源的类型 上面的查询语句3已经用到了这个视图,可以参考上图中的分析说明。
之前我们简单了解了各种查询的用法,然而在实际开发中还会用到一些比较高级的数据处理和查询,包括索引、视图、存储过程和触发器。从而能够更好地实现对数据库的操作、诊断及优化。...什么是索引呢,索引是 SQL Server 编排数据的内部方法,他为 SQL Server 提供了一种方法来编排查询数据的路由,从而达到通过使用索引来提高数据库的检索速度、改善数据库性能。...索引也是分为以下六类: 1、唯一索引:不允许两行具有相同的索引值,创建了唯一约束,将会自动创建唯一索引。...2、主键索引:是唯一索引的特殊类型,将表定义一个主键时将自动创建主键索引,他要求主键中的每个值都是唯一的。 3、聚集索引:在聚集索引中,表中各行的物理顺序和键值的逻辑索引顺序相同。...、维护应用程序更方便 注意事项: 1、每个视图中可以使用多个表 2、与查询相似,一个视图可以嵌套另一个视图,最好不要超过三层 3、试图定义的 select 语句不能包括以下: ORDER BY 子句,除非在
集合的列 用于集合运算符的两个查询必须返回相同列数且对应列数据类型相互兼容的结果集。在进行比较运算时,集合运算符会认为两个NULL值是相等的。...从上面两个结果集中可以看到,UNION与UNION ALL的区别是:UNION会去除结果集中的重复元素,而UNION ALL不会,从性能上来讲,UNION ALL优于UNION。...UNION ALL中ALL的含义是返回所有重复行。与之类似,INTERSECT ALL中ALL的含义是不删除交集中的重复项。...经过开窗函数ROW_NUMBER()的处理后,原本相同的数据被视为不同。...推荐阅读 T-SQL基础(三)之子查询与表表达式
• 索引的作用:通过使用索引,可以大大提高数据库的检索速度,改善数据库性能。...唯一索引: 唯一索引不允许两行具有相同的索引值。 如果现有数据中存在重复的键值,则大多数数据库都不允许将新创建的唯一索引与表一起保存。当新数据将使表中的键值重复时,数据库也拒绝接受此数据。...尽管唯一索引有助于找到信息,但为了获得最佳性能,建议使用主键约束或唯一约束。 主键索引: 在数据库关系图中为表定义一个主键将自动创建主键索引,主键索引是唯一索引的特殊类型。...主键索引要求主键中的每个值是唯一的。当在查询中使用主键索引时,它还允许快速访问数据。 聚集索引(clustered index) 在聚集索引中,表中各行的物理顺序与键值的逻辑(索引)顺序相同。...设置某列为主键,该列就默认为聚集索引 如何创建索引 使用T-SQL语句创建索引的语法: CREATE [UNIQUE] [CLUSTERED|NONCLUSTERED] INDEX index_name
为了测试的接近实际型,我执行的时候关掉了电脑上的所有程序,除测试程序,10次相同环境下重复测试10万条数据量的平均值。...以下为10万条数据的查询排行,单位为毫秒(ms)。...缺点:配置文件比较多,t-sql在每个配置文件里面写,条件查询比较麻烦。 SubSonic 优点:删除和查询效果很好,添加比较慢。 缺点:语法比较接近Linq,语法自成一派比较不满意。...NHibernate 优点:覆盖功能比较全,稳定性好,集成性能好,使用比较广泛,支持t-sql和hql语法。 缺点:配置比较多,比较麻烦,效率比较慢。 NBear 优点:配置最简单。...缺点:操作语法不成熟,不支持t-sql,使用起来不方便,已经很久没有更新了。 ps:大家根据测试的结果自行选择合适的框架。
本系列包含上中下三篇,内容比较驳杂,望大家耐心阅读: 那些年我们写过的T-SQL(上篇):上篇介绍查询的基础,包括基本查询的逻辑顺序、联接和子查询 那些年我们写过的T-SQL(中篇):中篇介绍表表达式、...WHERE字句:该字句中字段的选择对于查询性能影响很大,如果符合索引(包括组合索引,需要正确的顺序)条件,那么查询就会通过索引而不是全表扫描。...其实,SQL SERVER能够识别查询中重复使用的相同表达式,也就是说在一个查询,出现多次相同的表达式,实际上只会运算一次,简直赞赞哒。...,由于数据库查询分析器的存在,有时看起来有性能问题的联接也能运行的很好,所以当遇到查询性能问题时,查看执行计划和分析统计数据非常的重要。...子查询的返回值可以是一个标量、多个值和一张表。 无关子查询 标量子查询 获取当前最大订单的相关信息: SELECT * FROM sale.
5.2 逆透视 所谓逆透视(Unpivoting)转换是一种把数据从列的状态旋转为行的状态的技术,它将来自单个记录中多个列的值扩展为单个列中具有相同值得多个记录。...: (1)Jackson,《30分钟全面解析-SQL事务+隔离级别+阻塞+死锁》 (2)BIWork,《SQL Server 中的事务与事务隔离级别以及如何理解脏读, 未提交读,不可重复读和幻读产生的过程和原因...where empid=3; select @firstname as firstname, @lastname as lastname; SET语句比复制SELECT语句更加安全,因为它要求使用标量子查询来从表中提取数据...如果在运行时,标量子查询返回了多个值,则查询会失败。...下面来看看一个实例,它使用游标来计算CustOrders视图中每个客户每个月的连续总订货量(连续聚合案例): -- Example: Running Aggregations SET NOCOUNT ON
本系列包含上中下三篇,内容比较驳杂,望大家耐心阅读: 那些年我们写过的T-SQL(上篇):上篇介绍查询的基础,包括基本查询的逻辑顺序、联接和子查询 那些年我们写过的T-SQL(中篇):中篇介绍表表达式、...派生表 派生表也称为子查询表,非常的常见,之前介绍相关子查询时那些命名了的外部表均是表表达式。表表达式并没有任何的物理实例化,其优势在于使得代码逻辑清晰并可重用,但对性能并无影响。...集合操作默认都存在一个隐式去除重复(即包含DISDINCT)的行为,只有UNION ALL支持重复数据。这儿补充一个关于集合概念,集合指不包含重复数据的集合,包含重复数据的情况我们称之为多元集合。...集合操作符涉及的查询应该有相同列数,并对应列具有兼容类型(即低级别数据可以隐式的转化为高级别数据,如int->bigint),查询的列名称由第一次查询决定(在其中设置列别名)。...实际SQL SERVER还不支持这种类型的操作,理解起来有点复杂,简单来说就是如果我的子查询A, B都有重复数据,一个是3条,一个是5条, 那么其INTERSECT ALL操作结果应该为3条,EXCEPT
本节讨论的相关内容包括:视图、派生表、CTE、内联表值函数 场景:如果要查询一组数据(例如聚合数据,也就是几个表聚合在一起的数据),这些数据并未在数据库中以表的形式存在。...1、视图:通常用来分解大型的查询。使查询更容易,无需在临时表中复制或者存储数据。视图存于数据库,适用于所有批处理的数据库对象。不适用于单个T-SQL的批处理。...经过编译,会合并外部查询和内部查询。不会是性能降低或提高。 出现多引用时比较麻烦,需要多次重复定义、多次查询。...) 不可嵌套,但为了实现和嵌套派生表相同的效果,可以在c2中使用c1 多引用优势,在接下来的查询中,多次引用cte,替代派生表的重复定义,多次查询方案。...好处是写法简单,但是实质,仍然是重新组织查询,直接访问底层的对象。所以如果数据表中包含大量的行,此时应该考虑使用临时表或表变量,减少访问基础表的次数为一次。
实际上在T-SQL语句的书写过程中经常犯得错误就是得出一个很窄的结论,然后教条式的奉若圣经,对于T-SQL领域来说,在网上经常可以看到所谓的优化守则,随便在网上搜了一些摘录如下: 不要有超过5个以上的表连接...而在SQL Server领域,T-SQL语句到查询结果返回需要经历一个完整的周期,如图1: 图1.T-SQL生命周期 因此,在关系数据库领域,SQL语句的写法只是一个抽象的逻辑,而不是像编程语言那样直接的实现...图1中从T-SQL到具体返回数据经历了多个步骤,每一个步骤又存在大量的规则。...因此在本文提到Where 1=1 and引起的性能问题就需要按照查询分析器的规则去考虑为什么,这也是Think like query optimizer。 ...Where 1=1 and a=1时,结果就变为 1*a列的选择率 *表中采样的总行数=a列的选择率 *表中采样的总行数 因此无论是否有1=1 and,查询分析器都会估计相同的行数,从而拥有同样的执行计划
正如《有理由爱Sqlserver》系列里所提到的,对于Sqlserver,数据分析师关注的点主要集中在数据的导入导出、数据查询、略懂一些权限管理、自动化操作,商业智能BI模块等。...SSMS登录Azure数据库引擎 对应于Azure上的订阅服务是SQL Server(逻辑服务器),如下图中的红框部分,当然黄框也是可以,数据仓库和数据库是一样的,只是性能不一样,收费不一样,对于我们部门级别的数据...Azure的订阅服务项 Azure的数据库导入导出功能 Azure数据库上,几乎和本地的Sqlserver的T-SQL支持一致,所以在Sqlserver上该有的SQL查询,在Azure上都是正常使用的,...Data Factory面向更高级的ETL Azure上的分析服务 对标Sqlserver的SSAS分析服务,在Azure上是Azure Analysis Service,这是笔者最喜爱的服务,可以让PowerBI...Excel催化剂插件使用最新的布署技术,实现一次安装,日后所有更新自动更新完成,无需重复关注更新动态,手动下载安装包重新安装,只需一次安装即可随时保持最新版本!
Oracle的解释是这样的: failed parse:语法、权限等无法执行的SQL解析,也是硬解析,并且解析失败是不能被重用的,当然它也不会存储在V$SQLAREA视图中,所以也挖掘不到这类SQL。...,将下线的业务代码停掉,避免错误解析导致数据库出现严重的性能问题。...1)、(标 量子查询2)......1)、(标 量子查询2)......而跟研发沟通发现实际上union all的下层查询可以去掉,去掉后则该SQL无需改写rownum就可以直接推进到主查询中,从这个例子可以看到不严谨的代码容易造成性能隐患,影响优化器评估最合理的执行计划。
ORDER BY orderdate DESC; 上面这条SQL请求返回与TOP n行中最后一行的排序值相同的其他所有行。 ...2.3 子查询 (1)独立子查询:不依赖于它所属的外部查询 例如下面要查询Orders表中订单ID最大的订单信息,这种叫做独立标量子查询,即返回值不能超过一个。...T-SQL支持以下两种选项: (1)UNION ALL:不会删除重复行 -- union all select country, region, city from hr.Employees union...在T-SQL中,INTERSECT集合运算对两个输入查询的结果取其交集,只返回在两个查询结果集中都出现的行。 ...EXCEPT结合运算在逻辑上首先删除两个输入集中的重复行,然后返回只在第一个集合中出现,在第二个结果集中不出现的所有行。
现在我们接着来讨论另外两个重要的T-SQL Enhancement Items:PIVOT和Ranking。 ...我们发现最终的结果按照CutomerID进行排序,RowNum从1开始以此递增,每条记录(不管是否具有相同的CustomerID)拥有不同的RowNum。...从上图中可以看到,最终的结果以ORDER BY中指定的SalesOrderID进行排序,但是ROW_NUMBER()体现的值却是基于CustmerID排序的。...RANK() RANK()的使用和ROW_NUMBER()类似。不过它与ROW_NUMBER()所不同的是:对于被指定为排序的字段,具有相同值得Row对应的返回值相同。...T-SQL Enhancement in SQL Server 2005: [原创]T-SQL Enhancement in SQL Server 2005 - Part I [原创]T-SQL
Sum 求集合中元素的和 八、集合操作符 LINQ 中的集合操作符是指根据相同或不同集合(或集)中是否存在等效元素来生成结果集的查询操作,一共有4种: 方法名 说明 Distinct...从集合移除重复值。...还有,如果Key为null,或者出现重复的Key,都将导致抛出异常。 6....SingleOrDefault的使用方式与Single相同。...十二、相等操作符 如果两个序列的对应元素相等且这两个序列具有相同数量的元素,则视这两个序列相等。 SequenceEqual方法通过并行地枚举两个数据源并比较相应元素来判断两个序列是否相等。
READ COMMITED: 系统默认的隔离级别,支持读取已提交的数据,通过要求读取者获取共享锁来防止未提交的读取,但由于其会在读取完成后释放锁,因而会存在在两次读取之间数据不一致的问题(也称之为不可重复读...REPEATABLE READ: 可重复读通过在事务中始终持有读共享锁的方式防止两次不同的读取。...UPDATE中需要复制行的版本,因而会相对降低写的性能。...在SQL SERVER中一旦出现死锁,系统会通过DEADLOCK_PRIORITY的死锁优先级来决定先终止哪一个进程,由于终止进程涉及事务的回滚等操作,会消耗一定的性能,通过更好的设计来避免死锁是更好的选择...那些年我们写过的T-SQL(上篇):上篇介绍查询的基础,包括基本查询的逻辑顺序、联接和子查询 那些年我们写过的T-SQL(中篇):中篇介绍表表达式、集合运算符和开窗函数 那些年我们写过的T-SQL(下篇
这是因为原生的云存储(主要指S3这样的对象存储)既能够容纳大容量的明细数据,又能在性能和成本间取得一个很好的平衡——如果它同时再支持复杂的即席分析查询,那么云原生存储就将成为数据湖的最佳载体,对于实现数据分析人员的自由探索和应用系统的查询集成都有着非常重要的意义...先做一个简单的计数: ? 嗯,颇为顺畅。再来一个与前篇文章相同的查询,这次使用T-SQL来表达: ? 也很快地返回了正确的结果。...关于PolyBase的查询性能,由于牵涉到的因素会比较多,需要专题探讨,在此不作重点讨论。就这里的例子而言,第一次的冷查询会相对较慢,之后对同一外部表的各种查询就比较快了,可以秒级返回。...至此,我们已完整地使用Azure SQL DW中的PolyBase能力实现了对Blob Storage的即席查询,实现了与前文例子中相同的效果。...小结 来自关系型数据库世界的PolyBase,赋能用户使用T-SQL直接访问查询Azure云存储中的数据文件,可谓神奇。
领取专属 10元无门槛券
手把手带您无忧上云