大约300吨的数据正在使用Google平台数据集(选项: dev)传输到大查询中。感谢您的阅读。
浏览 1提问于2020-10-19得票数 2
回答已采纳
我喜欢处理超过5GB的.CSV格式日志的每个人，下面的内部结构。 3db953e172f313e674374e71730b0c746bea97be,desktop,2017-01-10T00:10:25.948Z e83ce32fa2b74ad65091b66e2cab94b684073f8c,mobile,2017-01-10T02:10:29.137Z
浏览 0提问于2017-01-15得票数 0
回答已采纳
我们使用Azure SQL数据库进行数据处理。而不是每次导入向导时，我们都希望通过从我们的会计平台自动地通过API加载数据。(API文档链接：，)有人能推荐我这个平台来解决这个问题吗？
浏览 3提问于2019-12-20得票数 0
回答已采纳
从数据库中导入大约30个主题的数据点(每1分钟输入9天的数据，60 * 24 *9* 30 =388,800个values)Convert数据到熊猫数据中进行预处理，如丢失值或重采样(此过程花费的时间最长)数据处理这个错误可能是VOLTTRON平台管理代理所做的事情。因此，代理无法正常执行数据处理。
浏览 4提问于2020-05-18得票数 0
回答已采纳
一开始，我有一个多平台项目，在这里我创建了一个传输数据的类，我的问题是，例如，如果我单击Button，应该调用该类中的方法，但我无法访问该方法。这是我的项目结构：
红色部分是数据处理程序所在的位置，绿色部分是从我获得单击事件并调用该方法的位置。
我希望有人能帮我解决这个问题！
浏览 0提问于2018-01-26得票数 0
回答已采纳
1回答
处理大型文件的更好方法
、、、
我有一个巨大的csv文件，我必须处理这个文件并做一些数据处理。现在，我正在缓冲区中读取/加载文件，然后进行数据处理工作。在文件非常大的情况下，我发现这种方法效率低下。
浏览 0提问于2020-08-15得票数 -4
3回答
上一个问题(初始级别优化)：Excel“大”数据处理与查找“
代码用途:根据新信息(由不同的宏提供)重新计算每列500 000行的25列。
浏览 0提问于2017-03-22得票数 4
回答已采纳
我有一个从数据仓库中提取的非常大的数据集。要将数据集下载到我想要运行lme4的机器上，需要很长时间。我想知道是否可以将数据处理成协方差矩阵，下载该数据(小得多)，并将其用作lme4的数据输入。我已经使用SAS为多个回归模型做了类似的事情，我希望我可以为lme4创建这种类型的输入。
谢谢。
浏览 9提问于2013-02-06得票数 0
1回答
“部分数据负载”术语
、、、
在我的例子中，我有一个非常大的文件，即“环境A”。为了改进我的数据处理(并阻止我的PC崩溃)，我只一次加载这个环境的一小部分。我不会将数据分割成不同的文件。是否有一个术语更简洁地描述了这种数据处理技术，而不是“部分负载”？
浏览 0提问于2022-10-18得票数 0
2回答
我正在谷歌云上建立我的数据处理平台，我需要关于如何将一切结合在一起进行速度优化的建议。我正在运行两个执行数据处理的计算引擎实例和一个为MongoDB数据库提供服务的独立实例。
浏览 2提问于2019-01-19得票数 0
1回答
我即将开始处理大小约为500 GB的数据。我希望能够使用Python在任何给定时间访问数据的小部分。我正在考虑将PyTables或MongoDB与PyMongo (或者Hadoop -谢谢)一起使用。是否有其他我应该考虑的文件结构/DB？干杯
浏览 5提问于2012-10-08得票数 3
回答已采纳
我正在使用Andengine创建一个2D跑步游戏，我的平台是由具有不同纹理区域的多个32x32精灵创建的。我想要能够创建不同大小的平台，所以我不能从一个图像文件创建一个平台。所以我的每个平台都是从几个精灵创建到几百个精灵，如果平台很大的话。这显然降低了我比赛的表现。这就是为什么我试图找到一种方法从我使用的小块创建我的平台来创建一个大Texture
浏览 0提问于2013-06-22得票数 0
我设计了我正在开发的应用程序的“核心”(它与服务器通信、数据处理等)，现在我在用户界面上有点卡住了，因为我希望它是具体的，并且在它将要运行的不同平台( PC、tablet、gsm )上可能会有所不同。我的问题基本上是：//问题是关于Flash 4.5的
浏览 4提问于2011-07-03得票数 0
回答已采纳
通过下面的链接，我已经能够将sensortag连接到beaglebone black，然后让beaglebone将sensortag收集的传感器数据中继到IBM Watson IoT平台。在Watson平台中，我可以可视化来自所有10个不同传感器的数据。是否可以在将beagle骨骼发送到Watson之前访问原始数据收集？我想在将beaglebone发送到Watson之前对其运行数据处理。如果您有任何使用sensortag和beagle bone black的经验，您的建议将非常感谢。谢谢。
浏览 0提问于2016-06-16得票数 0
1回答
我开始了解hadoop。我对它有了一些了解，但是当我读到关于Hive，Pig和其他Apache工具时，我感到很困惑。因此，有人能简单地概述一下hadoop和Apache的工具(Hive、Pig、等)，我想知道它们在处理大数据时是如何和在哪里使用的。
浏览 3提问于2014-05-20得票数 0
回答已采纳
远程机器'C‘包含一个数据处理平台。Airflow正在本地计算机“L”上运行。预计来自数据库的简单select查询将产生大小约为1 GB的数据集。我想用在DB上运行查询并将结果传输到'C‘的任务之一创建一个airflow DAG。但GenericTransfer运营商的官方文档中写道：
“这意味着要在内存中可以容纳的小型数据集上使用。”
浏览 3提问于2016-11-22得票数 2
1回答
我正在为运行Kafka->Spark->Cassandra工作负载在AWS上创建DC/OS集群。我可能会使用m3.size或r3大型实例。
浏览 3提问于2016-05-17得票数 2
回答已采纳
我正在测试允许任何用户轻松创建数据处理管道的平台。该平台必须满足一定的需求，其中之一就是能够将数据从Oracle/SQL Server转移到HDFS。
浏览 3提问于2019-12-17得票数 1
回答已采纳
我们正在研究促进大规模并行数据处理的解决方案。我们的处理图通常相当复杂，所以开发良好的运算符框架就很方便，比如DataRush提供的一个无处不在的运算符框架。DataRush是Java语言，但我想考虑所有可用的解决方案的平台和语言。
浏览 1提问于2010-01-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
对象存储
云直播活动推荐
腾讯云开发者
