按日期对大型表进行分区

文章/答案/技术大牛

发布

1回答

mysql、sql、database、relational-database、partition

表结构如下所示： CREATE TABLE `urls` ( `url_id` varchar(10) DEFAULT NULL,PARTITIONS 10; 当我尝试生成报告并连接其他人的表

浏览 14提问于2020-01-13得票数 1

1回答

Oracle表和索引分区-风险和缺点

oracle、oracle11g、relational-database、database-performance、partitioning

我在数据库(100GB+)中有大型的未分区表，为了能够提高性能，我考虑对它们进行分区，或者仅仅是索引。数据是定期输入的，并且是按日期选择的，所以我认为按创建日期的月份划分范围将是很好的选择。第一项是：第二：如何在现有和未分区表</e

浏览 1提问于2016-12-07得票数 0

回答已采纳

1回答

我需要在Hive中优化查询，其中我使用分区联接表，但使用两个不同的分区： select *join k1a.upc_nbr, a.item_nbr, a.signing_desc, a.dept_nbr, b.store_nbr, c.store_nm, d.cal_wk_nbr limit 10; 分区将为core_dim_dl_tables.dl_item_dim、k1_repl_dl_tables.repl_managed

浏览 10提问于2020-12-04得票数 0

回答已采纳

1回答

对Postgres表进行分区

postgresql、database-partitioning

我正在Postgres 11中构建一个数据库，我想通过对表进行分区来对信息进行分段。约会表已经按日期范围进行了分区，我还想对患者表进行分区；即按每个医生对患者进行分区。问题是:如何使用列表分区对患者表进行分区？也就是说，对

浏览 10提问于2019-07-14得票数 1

回答已采纳

2回答

是否使用特定的时间戳列将CSV导入BigQuery上的已分区表？

google-bigquery

我想要将一个大型csv导入到一个bigquery分区表中，该表具有一个timestamp类型的列，该列实际上是某个事务的日期，问题是当我加载数据时，它会将所有内容都导入到今天日期的一个分区中。是否可以使用我自己的时间戳值对其进行分区？我怎么能做到这一点。

浏览 0提问于2016-07-05得票数 1

1回答

联合表在BigQuery中的查询成本比单个表高吗？

google-bigquery、database-partitioning、database-cluster

BigQuery成本方案当我查询一个大型的联合表(按日期字段进行分区并按客户端键字段进行群集)时，对于特定客户端的数据，它处理的数据似乎比我单独查询该客户端表时处理的数据要多。相同的查询，应该是来自不同表的完全相同的数据；巨大的不同成本。有谁知道为什么查询分区/集群联合表的成本比单个客户端特定表的相同数据还要高呢？

浏览 8提问于2022-07-29得票数 0

1回答

按日期对MySQL表进行分区

mysql、partitioning

我有一个表(innodb)，它最终将有数十亿条记录。每隔一周，我预计会有大约500K条记录被丢弃到表中。我希望根据导入数据的日期对该表进行分区-幸运的是，这是表中的一个字段，格式为yyyy-mm-dd -可以基于该日期列对其进行分区吗？我试着看了mysql文档的第18章，但不知道这是否可能。

浏览 6提问于2010-04-01得票数 1

3回答

如何使用sqoop在Hive中创建外部表。需要建议

hadoop、hive、sqoop

使用sqoop，我可以创建托管表，但不能创建外部表。1.对仓库中的表进行分区。有些是按日期分区的，有些是按状态分区的。

浏览 5提问于2015-01-17得票数 2

回答已采纳

1回答

对于包含另一个表的引用键的表，我们可以在PostgreSQL中使用继承吗？

postgresql

我有两个表，名为item和itemdetail。itemdetail表包含20多万条记录。itemdetail表具有其他表的引用键，我希望按日期对该表进行分区(每年一次)。我想知道的是如何对itemdetail表进行分区，因为它包含许多其他表的引用键。我在某个地方读到，如果表中包含任何引用键，则不能对其

浏览 3提问于2013-08-16得票数 0

回答已采纳

1回答

Oracle表分区选项

oracle、oracle19c

我在oracle db中有一个事务表，在多个帐户中每天记录多达2000万条记录，帐户增加到100条。为了尽快提出问题，我正在考虑：对于这两个不同的分区(范围和哈希)有什么建议吗？以及在分区表中清除数据时的任何特殊注意事项。谢谢

浏览 1提问于2021-07-08得票数 0

1回答

将分区切换到现有表

sap-ase

Oracle和Server具有这样的特性，它允许将表分区切换到现有表(例如，讨论过的)。我无法为Sybase ASE找到类似的功能。-------------------- ------ 如果我先把索引放在表</em

浏览 4提问于2017-06-21得票数 0

回答已采纳

1回答

如何按日期列对oracle表进行分区？

database、oracle、date、database-partitioning、database-scripts

我在oracle中有一张表： id INT NOT NULL, ...我想按stmtvaluedate列对这个表进行分区。我的目标是在一个月后创建一个新的分区。最好的方法是:如果一个月过去了，将自动创

浏览 1提问于2015-11-19得票数 5

回答已采纳

1回答

在mySQL中使用非唯一行的分区表？

mysql、database

我正在尝试使用date作为分区列来对MySQL表进行分区(基本上是尝试对其进行分区，以便存储30天的数据，并自动清除其余的数据)。但是，当我尝试使用date列按范围进行分区时，编译器给出了错误消息"A主键必须包含表的分区函数中的所有列“。但是，我不能将date列作为主键，因为许多日期恰好是相同的，所以它们不再是唯一的。

浏览 1提问于2013-06-26得票数 0

回答已采纳

1回答

Postgres数据按日期分区‘早于x天’

database、postgresql、partitioning

我想对一个包含大量旧数据的大表进行分区。我希望实现只有过去30天的记录留在一个分区中，其余的保存在一个‘存档’分区中谢谢，Detlef

浏览 0提问于2018-12-01得票数 0

1回答

如何使用BQ中的分区表？

google-bigquery

我以前从未使用过分区表。我只是创建了一个示例，以确保我是否正确地理解了分区表。table myfirstdataset.newtable(transaction_id int64,transaction_date date) partition by transaction_date11 6 2017-01-20 该表

浏览 0提问于2018-05-22得票数 0

1回答

PySpark -遍历数据帧的每一行并运行配置单元查询

python、apache-spark、pyspark

我有一个包含100行名称、年龄、日期、小时的数据帧。我需要用不同的日期值对这个数据帧进行分区。假设这100行中有20个不同的日期值，那么我需要产生20个并行配置单元查询，其中每个配置单元QL都会将这些分区中的每个分区与一个配置单元表连接起来。Hive表- dept，couse，date按日期字段分区。 Hive表很大，因此我需要将这些连接优化为多

浏览 0提问于2017-09-19得票数 0

1回答

Sql Server 2008分区+标识列约束问题

sql-server-2008、partitioning

我有一个包含大量数据的表，我决定对该表进行分区，但我遇到了一些问题，请澄清它们。问题是我不能在分区表中插入记录，因为分区视图由于标识约束而不能插入数据。请帮帮我。

浏览 0提问于2011-12-26得票数 1

1回答

Mysql云SQL支持垂直分区

google-cloud-platform、google-cloud-sql、partitioning

我想按日期对我的表进行分区。我们使用CloudSQL实例来托管我们的Mysql数据库。云SQL是否支持垂直分区？如果是，会不会类似于Mysql？

浏览 28提问于2021-05-04得票数 0

1回答

可以在BigQuery中划分嵌套表吗？

google-bigquery、partitioning、denormalization

然而，这导致了许多嵌套表。如果每个嵌套表都有一个列"created_at“和"last_modified_at"，那么是否可以使用这些值中的任何一个来对表进行分区？

浏览 3提问于2021-12-02得票数 1

回答已采纳

1回答

stats表的最佳分区

mysql、database-performance、database-partitioning

我们有一个大型的统计表，每天记录每件产品的点击量。date | datetime hits | int约200米rows+ 我们有两种查询此日期的方法--它总是在WHERE (或多个productid )中有productid，然后也可以选择指定日期。我们允许用户查询通常的日期‘桶’，如今天/昨天/最后7天/上个月/最后3个月/今年/去年。他

浏览 2提问于2020-11-27得票数 0

回答已采纳

点击加载更多