我有一个事实数据表，其中包含5000万条由Posting_Date_New分区的名为AccountLines的记录。当我过滤特定分区列上的记录时，我的查询可以正常工作，并且只扫描给定范围内的有限数据。但当我在Posting_Date_New列的基础上与维度表进行连接，并根据财务年度进行过滤时，它会扫描整个表。我该如何解决这个问题
浏览 6提问于2018-08-30得票数 0
我得到了以下查询，它在分区表上执行得非常慢，并且我不知道为什么。它似乎正在扫描整个表，而不仅仅是分区的值。_ve表速度很慢，并且是按日期进行分区和集群的。未分区的表大约需要一分钟，分区的表大约需要一个小时。ve AND _ve.Code= _rr.Code
WHERE _rr.Date
浏览 8提问于2015-09-03得票数 3
我在一个项目中工作，在这个项目中，我必须每天存储与每个用户的用户活动相关的事件，以便以后分析。我将获得带有时间戳的事件流，稍后将在此数据上运行数据流作业以进行分析，以获取每个用户的统计数据。我正在探索大表来存储这些数据，其中时间戳将作为每一行的关键字，稍后我将运行范围查询来获取单日数据并对其进行处理。但是，在浏览了几个资源之后，我发现有了时间戳的行键，大表就可以进入热点了。无法将userid提升为行键中</e
浏览 2提问于2020-03-31得票数 0
1回答
现在，我有一个由dt分区的hive表，dt是日期字符串。该表还有一个字段col，其值等于dt。这两个sql在性能上有什么不同吗？
浏览 1提问于2017-05-12得票数 0
需要能够创建一个使用通配符表规范的视图。如果像select count(*) from schema.viewname where tableid='l100‘这样的查询</
浏览 10提问于2017-03-01得票数 1
是否有元数据操作可以为我提供使用中的最大分区日期/时间戳(对于自定义分区表，而不是摄取分区)，这样我就不需要使用max函数扫描整个表了？还是其他一些聪明的SQL方式？我们的源表非常大，大多数时候它都会获得数据的新快照--但是数据通常是用于current_date()-1...but的--总之，除了一个查询告诉我一个大表
浏览 0提问于2018-10-29得票数 1
回答已采纳
我已经将一些大型表上传到BigQuery，并可以在它们上运行查询。通过只扫描特定的所需列而不是SELECT *，我已经成功地降低了水平成本。
将限制子句应用于SELECT *查询不会影响读取的数据量。您是因为读取整个表中的所有字节而被计费的。是否有其他方法可以减
浏览 1提问于2019-11-11得票数 0
回答已采纳
2回答
我试着测试Mysql分区的好处。每个表都有10M的记录。CREATE TABLE `neworder10M_part_byuser` ( `site_from_id* from neworder10M_part_byuser where user_to_id=%s;&q
浏览 3提问于2016-05-19得票数 3
回答已采纳
随着时间的推移，这些表变得非常大，Postgres 10中范围分区的可用性激发了我离开我的共享主机服务，在Linode从头开始构建服务器的想法。在我将读数分成两周的区块后，我对这些大表的查询速度变得更快了。几个月后，我检查了查询计划，非常惊讶地发现在查询中使用now()会导致PG扫描我的分区表上的</e
浏览 3提问于2018-03-11得票数 2
1回答
分区表的查询性能慢吗？
、、、、
我在阅读有关分区表的文章时，搞不清这是好事还是坏事。我确实理解分区是为大量数据集而设计的。但这是我的困惑:让我们假设有一个表：而且它有大量的数据；足以证明分区是合理的。在这个表的每一列上都执行了select查询；许多查询都与其他表连接。如果我基于OrderId对表进行分区，基于其他列的
浏览 0提问于2014-05-28得票数 2
2回答
我是想利用您在BigQuery中的经验来决定我的数据的最佳结构，我在关系数据库(尤其是Oracle )方面有5年的经验，我熟悉关系数据库中构建数据仓库的最佳实践，但在云解决方案方面，我仍然是新手因此，我的很多数据每天都有较低的行数(从1K
浏览 4提问于2019-12-13得票数 1
回答已采纳
我创建了一个表如下：id INT NOT NULL,lname VARCHAR(30),插入记录后，我查询表以验证它是否正在从预期的分区中获取数据。PARTITIONS SELECT COUNT(*) WHERE hired BETWEEN'2015-01-01'
浏览 2提问于2016-04-22得票数 0
回答已采纳
1回答
我有一个表，大约有2500万行在一个时间键(月)上分区。每个分区内大约有200 K行。
我们在BI上下文中使用此表，这意味着业务用户对此表进行查询时，除了筛选值之外，查询始终是相同的。大多数情况下，最终用户对24个月的数据范围进行查询，这意味着需要对24个分区进行数据查询。我们认为，如果我们在没有分区的情况下对同一个表进行查询，那么查询的
浏览 0提问于2019-08-19得票数 1
回答已采纳
我有一个表，e，每天设置范围分区。主表和分区表的定义如下。-05-01’::DATE AND toi < ‘2015- 05-02’::DATE)WITH ();
由于某些原因，无论我如何在SELECT中构造WHERE子句，我似乎都无法得到一个计划，而不是Seq扫描每个分区表吗？
浏览 3提问于2015-06-10得票数 2
回答已采纳
我在甲骨文中找到了关于不同识别码的教程。我在想，是否有人能解释一下这三种创建索引语句之间的区别：和我创建了一个索引：如果我也只查询例如invoice_no，那会是什么类型的<
浏览 0提问于2018-03-26得票数 4
回答已采纳
3回答
我在hdfs中有一个由yyyymm分区的表pos.pos_inv。以下是查询： and inv.yyyymm=201501
我已经为
浏览 2提问于2016-08-20得票数 12
我在我们的项目中实现了DynamoDB。我们必须将大的数据字符串放入数据库中，所以我们将数据拆分成小块，并插入多个行，其中只有一个属性值发生了变化-字符串的一部分。一列(范围键)包含多个零件。我读到当你想要删除一个项目时，你需要为这个项目指定主键(散列键或散列键和范围键-取决于表)。但是，如果我想删除某个属性具有特定值的项，该怎么办？我是否需要扫描(扫描，而不是查询</em
浏览 5提问于2012-09-18得票数 4
回答已采纳
1回答
我是新来蜂巢的general.From中的hadoop生态系统我学到了Hive的基础知识您可以基于某个attributes.And在hive表上创建分区如果查询提到了该属性，那么它应该会获得性能提升，因为hive只扫描特定的分区文件，而不是扫描整个table.My问题是假设我们在data.Say中有一些分层结构我根据唯一的状态值对表进行分区，每次查询</e
浏览 0提问于2020-06-03得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
