DolphinDB的分区列数有限制吗？

文章/答案/技术大牛

发布

1回答

database、partition、data-partitioning、dolphindb

DolphinDB对可以指定的分区列数有限制吗？假设表中的大多数列都有相同的取值范围(100列)，我可以通过指定所有列来创建分区表吗？

浏览 16提问于2019-07-07得票数 1

1回答

DolphinDB内存管理

memory、dolphindb

我的台式机有32G内存。我需要在DolphinDB中使用一个500 to的分区表。每个分区大约200MB。如果我在做一个操作，比如对整个表上的一列进行求和，我想了解DolphinDB是如何管理内存的。在我看来，对于已分区的表和未分区的表，DolphinDB进行的内存管理是不同的。

浏览 29提问于2019-04-28得票数 0

1回答

从DolphinDB中的散列分区获取具有特定名称的记录

hashtable、dolphindb

我的表是在“name”列上分区的散列。我希望从所有分区中检索具有特定名称值的所有记录。有任何DolphinDB函数来实现它吗？

浏览 1提问于2022-03-04得票数 1

1回答

BigQuery + Athena + Presto:分区和列数量的限制

presto、amazon-athena

基于Google BigQuery文档，BigQuery有以下限制()：每个分区表的最大分区数- 20,000 对于AWS雅典娜或普雷斯托的列数是否有严格的<e

浏览 2提问于2020-05-25得票数 2

1回答

如何确认记录值是否符合dolphindb中的分区方案？

database、date、types、partition、dolphindb

我创建了一个分区表。database("dfs://valuedb", VALUE, 2000.01M..2016.12M)因此，记录的列但我发现我还可以在dolphindb中插入类型为DATE(而不是MONTH)的'month‘值的记录：pt.append(

浏览 6提问于2020-02-28得票数 0

2回答

Spark的RDD有大小限制吗

apache-spark、rdd

spark的RDD有大小限制吗？对于我的特定情况，一个RDD可以有2400列吗？

浏览 32提问于2018-01-16得票数 0

回答已采纳

1回答

DolphinDB Python :在将数据写入具有compo域的dfs表时partitionColName的问题

database-partitioning、dolphindb

我的理解是，PartitionedTableAppender方法的DolphinDB Python可以实现并发数据写入。我试图将数据写入带有compo域的dfs表，其中分区由“日期时间”和“符号”的值决定。现在我想写的数据包括一天150个符号的记录。这就是我试过的：但是，似乎只能在partitionColName中指定一个分区列。如果我写错了，请告诉我。

浏览 15提问于2021-12-09得票数 0

1回答

与查询相关的分区数[100000]太大

sql、database、dolphindb

我在dolphindb中执行以下脚本。它抛出与查询相关的分区的exception.The数量100000太大。请在WHERE子句中对分区列添加更具体的筛选条件，或考虑更改配置参数maxPartitionNumPerQuery的值。如何修改配置参数maxPartitionNumPerQuery？

浏览 7提问于2019-07-10得票数 1

1回答

在DolphinDB中计算分组中介

sql、distributed-computing、median、dolphindb

我在DolphinDB中有一个DFS表。我试图运行一个查询，该查询将计算此表上的分组中介。但这只是个例外。select median(col1) from t group by col2 列med(v1)中的聚合函数没有映射减少实现，不能应用于分区或分布式表。在我看来，DolphinDB不支持分布式中值算法。

浏览 0提问于2019-07-11得票数 0

1回答

我可以在DolphinDB数据库中使用小时构建分区吗？

partitioning、dolphindb

在DolphinDB教程中，分区的最佳大小约为100MB。对于我的用例，基于日期的分区太大了。我需要基于date + hour构建分区。有谁知道最简单的方法吗？

浏览 17提问于2021-01-18得票数 0

1回答

如何在vertica中对varchar列进行范围分区

vertica、dolphindb

我有一个很大的表，希望对varchar列进行分区。我尝试使用以下脚本在垂直方向对其进行分区： create table tb1(...PARTITION BY symbol; 我认为PARTITION BY在符号列上进行了值分区，当我将数据加载到表中时，它失败了，出现了预期的过多分区。如何对符号列进行范围分区？例如，我知道Dol

浏览 28提问于2019-05-17得票数 1

回答已采纳

1回答

如何在dolphindb中的已有分区表中添加新列？

database、partition、dolphindb

如何在dolphindb中的已有分区表中添加新列？我创建了一个分区表，并在其中插入了一些数据，代码是：x=1..6\5db=database("dfs://rangedb", RANGE, 1 4 7(t1); 现在，我想在这个表中添加两列。例如:列为"price"，"qty"，数据类型为DOUBLE，INT。我该怎么办？

浏览 6提问于2021-05-27得票数 0

2回答

Cassandra列限制

cassandra、cqlsh

输出是否意味着我在该键中存储了10000列，并且不能向其中添加更多列，因为限制是10000列？如果它达到10000，那么更多的列将不会插入到该键中？如果是，我该如何改变这种情况？我必须设置LIMIT吗？因为我有很多列要存储，所以我不想使用LIMIT。

浏览 0提问于2014-11-13得票数 3

1回答

如何在DolphinDB查询中消除分布式表中的重复记录

sql、duplicates、dolphindb

我使用以下脚本从DolphinDB中的查询结果中删除了重复的记录，其中'quotes‘是一个分布式表，具有两个分区列'date’和'symbol‘。有人知道该怎么做吗？

浏览 33提问于2021-02-06得票数 1

2回答

卡桑德拉在表中支持的最大列数

database-design、cassandra、time-series

partition bitint, timestamps bigint, key text, value text, PRIMARY KEY((partition,key),timestamps);卡桑德拉表支持的字段数量是否有限制？有什么更好的办法吗？

浏览 0提问于2018-09-04得票数 0

回答已采纳

2回答

在Azure Cosmos DB中选择PartitionKey

azure-cosmosdb、partitioning

我有一堆文件。目前只有10万人左右。但我可能会有几百万美元。这些文档每个大小约为15KB。现在，我计算分区键的方法是从Sql中获取Id字段，该字段被设置为自动递增1，然后将该数字除以1000。例如，如下所示： 12000120091208012102 正如您所看到的，所有这些文档都会同时写入到同一个分区中，因为它们的分区键都是12。从我读过的文档来看，这并不好。我应该将我的写操作分散到多个<

浏览 18提问于2019-05-25得票数 0

回答已采纳

3回答

卡桑德拉允许的最大列数是多少？

cassandra、cassandra-cli

卡桑德拉发表了它的，但没有提到允许的最大列数。是否有最多的列数？我需要存储400+字段。在卡桑德拉有可能吗？

浏览 9提问于2015-05-19得票数 7

回答已采纳

1回答

垂直分区MySQL表

mysql、join、partitioning

我正在审查一个案例，其中200+列主要是varchar(100)。这些列来自多个外部数据源，如CRM /人口统计学数据等。我不能将它们保存在一个MySQL表中，因为列的数量在不断增加。一般查询情况可能包含一个或多个垂直分区的列。最佳的</em

浏览 0提问于2018-03-27得票数 1

3回答

Slurm，限制每个分区的作业数。

scheduler

我正在配置Slurm调度程序，我需要限制分区(队列)上并发运行的最大作业数。也就是说，我有两个分区，短的和长<em

浏览 0提问于2014-07-11得票数 1

1回答

如何在dolphindb中读取文本文件？

database、file、scanf、readfile、dolphindb

dolphindb手册说它可以像这样读取文件x=fin.readLine()1 2 3 4 5 6 7 8 9 如何逐个获取这九位数？

浏览 13提问于2020-02-24得票数 1

点击加载更多