首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

97- 优化select distinct owner from tbig

朋友发来一个SQL: select distinct owner from tbig where owner is not null; 已知tbig表很大, owner 的唯一值个数比较少, 问如何利用...owner字段上的普通索引,让上面的查询做到最优(不考虑位图索引和物化视图的方法) (tbig表几千万记录以上, 如果要模拟, 可以通过dba_object几次复制, 生成几十万记录就可以了, 然后创建...所以说最好的优化还是设计出来的. 但是现在就是要优化这个看起来没有什么优化思路的SQL....下面再把这个sql"简化"一下, 看看你能不能在上面的基础上, 用最优的方法得到下面的结果(owner 字段定义是可为null): select distinct owner from tbig;...补充: 这种sql, PG和oracle都要用到复杂的递归才写法能优化, 而mysql根本不需要任何改写, 就能达到PG和oracle复杂优化写法的效果.

40310
您找到你想要的搜索结果了吗?
是的
没有找到

SQL 简介:如何使用 SQL SELECTSELECT DISTINCT

您可以通过编写查询来请求数据库中的特定信息,该查询是一种从数据库中的表返回或传递所需信息的语句。SELECT 语句是 SQL 中最常见的操作,因为它指定要从数据库返回哪些数据。...SELECT 命令与 FROM 子句一起操作,从数据库表中检索或提取信息,并以有组织和可读的方式呈现它。查询中的 SELECT 关键字说明要将哪些行和列显示为查询的结果集。...使用 SELECT 语句,您可以指定与您希望查询返回的表中的行相匹配的值。...在其最简单的形式中,SELECT 语句必须包含以下元素:一个 SELECT 子句,它指定包含与查询匹配的值的列,以及一个 FROM 子句,它指定包含 SELECT 子句中列出的列的 TABLE。...SELECT 语句也可以有许多可选的子句来优化查询并返回精确的结果。常用的条款包括:在哪里。SQL WHERE 命令指定要检索的行。通过...分组。

1.1K00

MYSQL 查询优化之路-之DISTINCT全表扫描

通过度娘,各种百度,是因为DISTINCT使用了全表扫描,现在特别记录下来。以背查验。...www.cnblogs.com/uttu/p/6384541.html https://blog.csdn.net/songxixi/article/details/8475747 附网上一个同学的分析,大家可以参考 需要优化查询...如果还有第三个参与Join,则再通过前两个表的Join结果集作为循环基础数据,再一次通过循环查询条件到第三个表中查询数据,如此往复 2.两表JOIN优化: a.当无order by条件时...,根据实际情况,使用left/right/inner join即可,根据explain优化 ; b.当有order by条件时,如select * from a inner join b where...s.ROLE_ORG AND s.ROLE_ID IN (32,33,36,41) where c.STATUS = 58 and c.changed_type = 79 limit 1,10; SELECT

4.2K42

SELECT STRAIGHT_JOIN优化join查询技巧

优化join查询的过程中 需要理解MySQL对多表连接的处理方式,首先MySQL优化器要确定以谁为驱动表,也就是说以哪个表为基准,在处理此类问题时,MySQL优化器采用了简单粗暴的解决方法:哪个表的结果集小...,就以哪个表为驱动表,当然MySQL优化器实际的处理方式会复杂许多。...MySQL优化器选择小表作为驱动表,但是当我们的排序字段是在大表里,于是乎不可避免的出现了「Using filesort」,「Using temporary」 这样效率会慢很多 当使用inner join...时,我们可以使用 SELECT STRAIGHT_JOIN xxx字段,xxxx字段 ,来强制使用左边的表作为主表,这样就能应用到索引了 默认速度很慢,是这样的

75520

Hive Count Distinct优化

未经优化的SQL语句转化后的MapReduce作业,它的运行效率可能大大低于用户的预期。本文我们就来分析一个简单语句的优化过程。...日常统计场景中,我们经常会对一段时期内的字段进行去重并统计数量,SQL语句类似于 SELECT COUNT( DISTINCT id ) FROM TABLE_NAME WHERE ...; 这条语句是从一个表的符合...由于引入了DISTINCT,因此在Map阶段无法利用Combine对输出结果去重,必须将id作为Key输出,在Reduce阶段再对来自于不同Map Task、相同Key的结果进行去重,计入最终统计值。...改进后的SQL语句如下: SELECT COUNT(*) FROM ( SELECT DISTINCT id FROM TABLE_NAME WHERE … ) t; 在实际运行时,我们发现...这一优化大幅地减少了第一个作业的Reduce输出IO以及第二个作业Map的输入数据量。最终在同样的运行环境下优化后的语句执行只需要原语句20%左右的时间。优化后的MapReduce作业流如下: ?

3.4K31

select 进阶查询

1.1 分组查询 1.1.1 语法 # where 和 having 可以省略 SELECT col_name, group_function, ··· FROM tb_name [WHERE where_condition...② where 是在分组前对记录进行筛选,而 having 是在分组结束后的结果里筛选,最后返回最终查询结果。  ...说明 max( ) 查询指定列的最大值 min( ) 查询指定列的最小值 count( ) 统计查询结果的行数 sum( ) 求和,返回指定列的总和 avg( ) 求平均值,返回指定列数据的平均值...1.4.1 语法 # 可以省略某些查询,但是顺序不能改变 select * from tb_name where where_condition group by group_expression having...400 的数据中 number 大于 3 的数据并按 name 分组,按照每组数据条数倒序,从 0 号数据开始查询 3 条数据 mysql> select *, count(*) from mydata

1.2K51

select 查询基础

1.1 基础查询 1.1.1 查询所有列 ☞ 语法 # " * " 代表返回表中所有字段的数据 select * from tb_name; ☞ 示例 mysql> select * from student...1.1.2 查询指定字段 ☞ 语法 # tb_name 表中需要查询的字段 select field_1, field_2 from tb_name; ☞ 示例 mysql> select name,...☞ 语法 # 用中文名代替字段名,其中 as 可以省略 select col_name [as] chinese_name from tb_name; ☞ 示例 mysql> select num as...1.2 条件查询 1.2.1 语法 # 条件查询 select * from 表名 where 条件; ☞ 注意   关键字 where 后面跟上一个或者多个条件,条件是对前面数据的过滤,只有满足 where...或者 IS NOT NULL,其他查询运算符对 NULL 值无效  ② 建议创建表的时候,尽量设置表的字段不能为空,给字段设置一个默认值。

75531

select 高级查询之连接查询

1.1.2 数据准备 mysql> select * from dept; +---------+-----------+ | dept_id | dept_name | +---------+----...* from tb_name_1, tb_name_2, ···; # 第二种方式 select * from tb_name_1 join tb_name_2 join ···; 1.1.4... ② 第二种是先获取连接的结果,然后使用 where 中的条件再对连接结果进行过滤  ③ 内连接查询的数据不包含连接条件字段为 null 的数据 1.2.2 示例 mysql> select *...| +---------+-----------+--------+----------+ 3 rows in set (0.05 sec) 1.3 外连接   外连接涉及到 2 个表,主表和从表,要查询的信息主要来自于哪个表...外连接查询结果为主表中所有记录。如果从表中有和它匹配的,则显示匹配的值,这部分相当于内连接查询出来的结果;如果从表中没有和它匹配的,则显示null。

82910

SQL优化终于干掉了“distinct

SQL优化之多表联合查询干掉“distinct”去重关键字 一、优化目的 二、优化之前的sql长这样 三、DISTINCT关键字的用法 四、谈:如何优化distinct的sql 五、distinct真的和...例如下面这两个查询是等价的: SELECT DISTINCT c1, c2, c3 FROM t1 WHERE c1 > const; 12 SELECT c1, c2, c3 FROM t1 WHERE...因此,关于distinct查询优化的更多细节可以参考Section 8.2.1.15, “GROUP BY Optimization”....总结有以下比较重要的几点: 1、distinct与group by几乎等价; 2、distinct的相关优化与group by的查询优化方法是等价的; 五、distinct真的和group by等价吗?...七、总结 对于本人而言学到了: 1、distinct与group by几乎等价; 2、distinct的相关优化与group by的查询优化方法是等价的; 3、如果distinct的不能让sql最优化

3.4K31

select 进阶查询语句

普通的 select…from 很明显不能满足我们的更细化的查询需求,它除了基本语法外,还可以拓展使用一些判断语法和过滤、分组语法。本文介绍一些 select 的进阶查询语法。...(+) = d.deptno group by d.deptno, d.dname 自连接 将一张表通过别名的方式视为多张表来查询 select e.ename ‘的老板是’ b.ename from...1; 子查询查询其实就是嵌套 select 语句查询,嵌套的 select 要用小括号括起来,子查询可以写在 select 后面,也可以写在 from 后面,也可以写在 where 后面,但是写在不同的位置都有不同的规则...null值 单行子查询案例: select * from emp where sal > (select sal from emp where ename = ‘SCOTT’); 多行子查询案例: 查询部门名称为...= emp.deptno and emp.sal > s.avgsal 方法2,使用相关子查询 select empno, ename, sal, ( select avg(sal) from emp

18620
领券