腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
ESRI提供了谷歌BigQuery无法提供的功能,以及如何将这两种
工具
结合使用?
、
、
、
我想知道的是:我应该选择哪个
工具
进行地理空间大
数据处理
、分析和可视化?哪个
工具
(ESRI和BigQuery)更适合用于什么?我想在非常
大
的时间地理空间数据集上运行复杂的查询,最后在地图上可视化结果。任何帮助都是非常感谢的!
浏览 5
提问于2019-10-28
得票数 0
回答已采纳
1
回答
描述我们的
数据处理
的术语是什么
、
、
因此,我们有各种
工具
从不同的来源加载数据、清理数据、处理数据、基于用户交互的标记数据等等。基本上,处理数据操作的各种流程和
工具
。我们的
数据处理
也广泛地处理用户输入。我正在寻找一个术语,我可以用来命名或描述我们的过程。
浏览 0
提问于2015-08-06
得票数 1
回答已采纳
3
回答
用Java构建
大
容量批量
数据处理
工具
、
、
我正在尝试使用Java构建一个ETL
工具
。ETL
工具
用于对大量数据(包括关系数据和其他类型的数据)进行批处理、写入、更新操作。我发现很难选择正确的框架/
工具
来完成这项任务。
浏览 7
提问于2014-12-09
得票数 2
回答已采纳
3
回答
如何在项目中分析内存使用情况?
是否有任何好的、免费的
工具
来分析C#中内存的使用情况?我有一个可视化项目,它使用相当
大
的集合。我想检查这个项目的哪些部分--在
数据处理
方面,还是在可视化方面--使用大部分内存,这样我就可以优化它了。 我知道,在计算集合的大小时,情况非常简单,我可以自己做。内存使用量相当
大
,例如处理大小为35 MB的文件--我的程序使用的内存略多于250 MB。
浏览 7
提问于2010-04-13
得票数 8
回答已采纳
1
回答
一个大型PHP项目的多个模块或多个服务器实例
、
我正在创建一个非常
大
的PHP项目,它包括大量的数据传输(通过API调用从/输出到多个数据库),以及大量的用户交互(用户点击前端应用程序,然后发送API请求)。例如,我需要不同的模块: API与第三方
工具
的集成等。
浏览 2
提问于2017-01-31
得票数 2
1
回答
如何使用python对数千行数据执行ETL?
、
、
、
、
我有一个pgAdmin数据库,它在geojson format.Using中包含数百万行,这个表是我创建的Tableau仪表板。由于行包含geojson格式的数据,所以我必须这样查询:jsondata -> 'properties' ->> 'qq',,jsondata -> 'properties' -&g
浏览 4
提问于2020-04-10
得票数 0
1
回答
数据建模和
数据处理
有什么区别?
、
、
在讨论大数据时,有时会提到,数据建模可以通过使用map reduce这样的
工具
来完成,而
数据处理
则可以由apache来完成。数据建模任务和
数据处理
任务之间有什么区别?提前感谢
浏览 0
提问于2022-09-17
得票数 0
回答已采纳
1
回答
处理大型文件的更好方法
、
、
、
我有一个巨大的csv文件,我必须处理这个文件并做一些
数据处理
。现在,我正在缓冲区中读取/加载文件,然后进行
数据处理
工作。在文件非常
大
的情况下,我发现这种方法效率低下。
浏览 0
提问于2020-08-15
得票数 -4
3
回答
Excel‘
大
’
数据处理
跟踪
、
上一个问题(初始级别优化):Excel“
大
”
数据处理
与查找“ 代码用途:根据新信息(由不同的宏提供)重新计算每列500 000行的25列。
浏览 0
提问于2017-03-22
得票数 4
回答已采纳
1
回答
如何允许用户通过终端上传Python脚本中的2个excel文件,然后下载一个新的文件文件?
、
、
、
我已经使用pandas构建了一个
数据处理
工具
。我的脚本接受2个非常
大
的excel文件(超过17000行),转换成dfs,并汇总和合并这2个数据帧。这给我留下了最后一个df。
浏览 17
提问于2021-02-03
得票数 0
回答已采纳
2
回答
Amazon Athena的用例
有人担心,如果要求托管这些数据三年,就会产生非常
大
的存储量,并且在使用Elasticsearch的情况下实现成本很高。另一种方法是将每天的
数据处理
成存储在S3中的report CSV,并使用Amazon Athena之类的
工具
执行查询。我们的应用程序是否可以向Athena发送即席查询,以响应web浏览器请求?
浏览 23
提问于2020-08-12
得票数 0
1
回答
关于GCP和数据驻留问题的无服务器架构
、
一般来说,任何云服务提供商,GCP在这种情况下,谷歌不是相关和强制性的,专门允许消费者为所有服务选择数据驻留和
数据处理
区域选项?否则,无服务器选项将会有严重的采用问题。请澄清。
浏览 0
提问于2019-07-02
得票数 0
1
回答
GSUTIL CP文件延迟
我使用Google cloud中的GSUTIL命令行
工具
将文件从一个GCS文件夹复制到另一个GCS文件夹,然后进行一些
数据处理
。最近我在最终目标(BQ表)中发现了一些数据丢失,当我深入挖掘发现问题与文件复制有关时,当我复制大量文件时,3K~5K e,例如,似乎有些文件没有及时复制到目标文件夹,
数据处理
开始,这些文件最终被复制,但对于
数据处理
来说为时已晚在GSUTIL命令行
工具
中有任何标志/配置来确保复制完全完成吗?我一直使用的命令是: gsutil -m cp gs://fo
浏览 0
提问于2015-05-20
得票数 1
1
回答
“部分数据负载”术语
、
、
、
在我的例子中,我有一个非常
大
的文件,即“环境A”。为了改进我的
数据处理
(并阻止我的PC崩溃),我只一次加载这个环境的一小部分。我不会将数据分割成不同的文件。是否有一个术语更简洁地描述了这种
数据处理
技术,而不是“部分负载”?
浏览 0
提问于2022-10-18
得票数 0
1
回答
调度码头-编写启动命令
、
、
、
对于我拥有的一个大型
数据处理
管道,我构建了一组码头容器,这些容器被分组成一
大
群,其中包含了dockerCompose.yaml文件。我发现用于等待-it.sh和dockerize等
工具
的docker文档是针对服务器和服务的,而不是针对客户端的(它们不公开端口或我可以监听的任何东西)。我不想使用更复杂的
工具
,比如rabbitmq,因为我只需要知道什么服务停止了
浏览 1
提问于2019-08-05
得票数 0
回答已采纳
1
回答
在Rails应用程序中调用命令行
工具
的好的/可伸缩的方法是什么
、
假设我有一个
数据处理
二进制文件,它接收作为输入文件名的数据,从一个指定文件读取数据,然后输出到另一个文件。还有其他选择/想法吗?
浏览 2
提问于2015-04-22
得票数 1
回答已采纳
1
回答
如何将数据交换器作为Windows服务运行?
、
、
我将如何以Windows服务的形式运行
数据处理
程序?最好使用免费
工具
,如。 有人有这样做的实际经验吗?
浏览 3
提问于2017-10-31
得票数 0
回答已采纳
2
回答
如何使用C#中使用
数据处理
程序类型的基于Java的SOAP服务
、
、
我尝试使用C#使用SOAP服务(Agile PLM webservice),但SOAP服务使用“
数据处理
程序”类型,这似乎是特定于Java的语言(据我所知使用Apache Axis库)。当我尝试使用wsdl.exe
工具
创建代理类时,由于没有此
数据处理
程序的类型而失败。有人可以建议如何(干净、有效地)使用此SOAP服务,而不必手动编写代理类或手动处理C#中的SOAP消息吗?
浏览 4
提问于2011-11-05
得票数 2
回答已采纳
1
回答
PC上的大量数据?
、
、
你好,我想处理10亿行,23列的大量数据。但在熊猫身上,我甚至无法读取数据。那么,如何在我的Dell XPS 9570计算机上处理这些数据呢?我能用spark来做这个吗?有什么建议可以在我的电脑上处理吗?
浏览 11
提问于2019-10-23
得票数 0
1
回答
这个用例中的数据仓库是什么?
、
、
、
、
我试图找出数据仓库、集群
数据处理
和用于查询数据仓库的
工具
/基础结构之间的区别(
工具
/服务/程序)Hadoop Cluster for Distributed
浏览 1
提问于2014-01-27
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据处理必备的十大工具!
安全测试get,Wireshark工具进行数据处理
加米谷大数据:大数据处理必备的十大工具了解一下
数据处理:大物实验的终极神器
Python分布式工具开发(三)-Python分布式工具开发之数据处理
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券