1回答
我正在Hortonworks 2.6.5上处理一个大小约为3TB的大型数据集，该数据集的布局非常简单。Id1)对于每个仓库的上述数据集，我们有事务日期列(trans_dt)的事务<em
浏览 18提问于2019-08-01得票数 2
1回答
我有一个代码，他的目标是从1.5B记录中获得10米最古老的记录。我不明白窗口解决方案是如何工作的？在单个执行者开始运行之前
浏览 3提问于2022-04-26得票数 5
1回答
出于效率的原因，我们需要处理一个大的数据集。数据源驻留在Hive中，但具有不同的分区条件。换句话说，我们需要从蜂巢检索数据到火花，并在星火中重新分区。但是在Spark中有一个，当数据被持久化时，它会导致重新排序/重新分配分区(无论是对parquet还是ORC)。因此，我们在星火中的新分区丢失了。作为一种选择，我们正在考虑在一个新的Hive</em
浏览 0提问于2018-07-30得票数 0
由Hive实现的默认MapReduce连接算法是什么？它是地图端的连接，缩减，广播-连接等吗？
它没有在原始文件中指定，也没有在联接上的Hive wiki中指定：
浏览 4提问于2013-10-20得票数 3
回答已采纳
1回答
我有一个基本的查询，从6秒到1秒，只需将一个连接从LEFT JOIN更改为LEFT HASH JOIN或“左循环连接”即可。有人能解释为什么这会导致性能的大幅度提高，以及为什么SQL的优化器没有自己解决这个问题吗？SELECT表A和表B在所有ID字段上都有数百万条记录和索引。使用Server 2005。编辑：A学院建议左循环连接，它似乎使它更快.SQL不是我的强项之一，所以我试图了
浏览 5提问于2009-09-08得票数 7
回答已采纳
1回答
然而，我想知道是否有某种方法可以在至少O(nlogn)时间内删除树中的大量元素。
如果它们在链表中碰巧是连续的，是否可以同时删除树的批量元素？
浏览 1提问于2016-05-12得票数 1
8回答
据我所知；
那么，我的问题是，集群是否保证了全球秩序？按相同的键分配到相同的减速器中，但是相邻的键怎么办？我能在这上面找到的唯一文档是，从示例看，它似乎是在全球范围内订购它们。但从定义上看，我觉得它并不总是那么做。
浏览 7提问于2012-12-05得票数 66
回答已采纳
我希望在节点js中使用Redis客户端更新排序集记录。为了更新我使用client.zAdd(key,{score:score, value:memberId})的一条记录。是否有任何命令或函数可以用于Redis中的大容量更新。我在谷歌上搜索，但没有得到任何解决方案。
提前谢谢你。
浏览 4提问于2022-09-05得票数 -1
我正在使用Hadoop，并尝试使用两个数据集创建一些交互功能，这是最好的方案。我可以将一个加载到内存中，然后在map函数中与其他数据集交叉，但是如果dataset对于RAM内存来说太大，它不是一个解决方案，您有什么想法？谢谢你的回答，我将试用这些，看看什么是最好的解决方案。
浏览 5提问于2013-04-25得票数 0
回答已采纳
我正在用java创建一个批量加载实用程序，它将从源数据库中读取表中的行，并在目标数据库中填充数据，因为目标数据库为空。假设在这个批量实用程序执行过程中没有插入具有过去日期(created_date)的记录，则一切正常。
SELECT * FROM dbo.根据SQL-Server的要求，如果不指定显式order by子句，则不能保证顺序。所以我不能删除order by，但是由于created_date不在所有的表中，所以这个查询将失败。有没有一个通用的
浏览 1提问于2018-10-18得票数 0
1回答
我们在应用程序中使用Elastic客户端，我们对将文档插入弹性搜索数据库进行了负载测试，发现存在性能问题。这是预期的结果吗？测试用例客户端机器:16 64内存，64位操作系统，英特尔核心i7，Windows
浏览 3提问于2016-12-16得票数 0
回答已采纳
4回答
有什么方法可以确定影响SSIS包加载性能的数据库差异是什么？我有一个包，它可以在大约5分钟内加载和处理我笔记本电脑数据库上的大约100k条记录
在测试服务器上尝试相同的包和相同的数据，这在CPU和内存方面都是合理的，并且它仍然在运行……到目前为止大约1个小时:-(用一小部分数据检查了包，它运行通过Ok
浏览 3提问于2009-07-07得票数 0
回答已采纳
我知道这个错误：
我正在使用。也许我没有使用我认为是的Server版本，因为设置用户权限的编程方法都没有起作用。我认为我正在使用Server 2012。我的计算机上可能有几个版本的SQL server。单击Help > About，它将显示各种组件的版本信息上方的
浏览 4提问于2015-09-05得票数 24
回答已采纳
1回答
在MySQL中，我有一个由嵌套集表示的树。对嵌套集合的操作需要修改表中的多行。例如，将节点添加到树中将需要重新排序右侧和左侧的值……我担心，因为有两个单独的UPDATE语句，在大容量环境中这可能会导致问题……我是否也应该锁定表，以确保这两个UPDATE语句之间没有任何变化？
浏览 2提问于2011-03-27得票数 4
回答已采纳
1回答
文本文件通过大容量插入加载，稍后通过Select语句解压缩。在谷歌搜索的基础上，我认为下面的细节可能是有用的：如何修改数据库/表/列以保存数据我以为这是一个常见的问题，但谷歌并没有给我一个明确的答案或指示。有人说NVARCHAR已经足够了。其他参考N'，使用选择中<em
浏览 1提问于2022-04-20得票数 0
我使用并行线程中的SqlBulkCopy将数据插入到表中。互联网上的各种链接都说，TableLock是使用SqlBulkCopy的好选择。
数据是巨大的和连续的。RowLock在多线程方面是否提供了更好的性能？如果启用了表锁，那么一个线程完成插入所需的时间将导致等待其他线程等待，而行锁定不应对插入产生任何影响，我对此感到困惑。
浏览 1提问于2012-07-11得票数 2
3回答
在阅读了这个问题中公认的答案之后：
我决定将我的初始容量设置为一个大的猜测，然后在我阅读了所有的值之后，将其修剪。我该怎么做？也就是说，我如何修剪字典，以便gc稍后会收集未使用的空间？我的目标是优化。我经常有较大的数据集，小数据集的时间限制是可以接受的。我希望避免重新分配和复制包含在大型数据集上</e
浏览 0提问于2014-03-15得票数 5
回答已采纳
1回答
我正在使用SQL Server 2012的数据仓库，我想知道什么是备份/还原策略中最优化、最自动化的过程。目前的意见和限制：2)目前的计划是每周进行全面备份，每天进行差异备份。我不确定什么时候会发生DML操作，因为它取决于我的应用程序的使用，但是是否有一种方法只跟踪数据</e
浏览 0提问于2014-08-18得票数 4
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
