我想知道的是:我应该选择哪个工具进行地理空间大数据处理、分析和可视化？哪个工具(ESRI和BigQuery)更适合用于什么？我想在非常大的时间地理空间数据集上运行复杂的查询，最后在地图上可视化结果。任何帮助都是非常感谢的！
浏览 5提问于2019-10-28得票数 0
回答已采纳
1回答
因此，我们有各种工具从不同的来源加载数据、清理数据、处理数据、基于用户交互的标记数据等等。基本上，处理数据操作的各种流程和工具。我们的数据处理也广泛地处理用户输入。我正在寻找一个术语，我可以用来命名或描述我们的过程。
浏览 0提问于2015-08-06得票数 1
回答已采纳
3回答
我正在尝试使用Java构建一个ETL工具。ETL工具用于对大量数据(包括关系数据和其他类型的数据)进行批处理、写入、更新操作。我发现很难选择正确的框架/工具来完成这项任务。
浏览 7提问于2014-12-09得票数 2
回答已采纳
1回答
在我的公司，我们正在开发一个从Siebel和Topace传递数据的过程；我们提取的数据处理非常复杂，我们希望使用用C#编写的定制库。
您能推荐与这些应用程序兼容的工具吗?可以在C#中100%编程吗？我听说过蓝棱镜，但我找不到免费的试用版
浏览 0提问于2019-05-23得票数 1
回答已采纳
是否有任何好的、免费的工具来分析C#中内存的使用情况？我有一个可视化项目，它使用相当大的集合。我想检查这个项目的哪些部分--在数据处理方面，还是在可视化方面--使用大部分内存，这样我就可以优化它了。
我知道，在计算集合的大小时，情况非常简单，我可以自己做。内存使用量相当大，例如处理大小为35 MB的文件--我的程序使用的内存略多于250 MB。
浏览 7提问于2010-04-13得票数 8
回答已采纳
6回答
我需要一个工具来比较两个二进制文件。文件非常大。我在互联网上找到的一些免费软件或试用工具对于处理大文件并不方便。你能给我推荐一些工具吗？
浏览 3提问于2011-11-17得票数 163
回答已采纳
我正在创建一个非常大的PHP项目，它包括大量的数据传输(通过API调用从/输出到多个数据库)，以及大量的用户交互(用户点击前端应用程序，然后发送API请求)。例如，我需要不同的模块：
API与第三方工具的集成等。
浏览 2提问于2017-01-31得票数 2
1回答
我有一个pgAdmin数据库，它在geojson format.Using中包含数百万行，这个表是我创建的Tableau仪表板。由于行包含geojson格式的数据，所以我必须这样查询：jsondata -> 'properties' ->> 'qq',,jsondata -> 'properties' -&g
浏览 4提问于2020-04-10得票数 0
1回答
在讨论大数据时，有时会提到，数据建模可以通过使用map reduce这样的工具来完成，而数据处理则可以由apache来完成。数据建模任务和数据处理任务之间有什么区别？提前感谢
浏览 0提问于2022-09-17得票数 0
回答已采纳
1回答
处理大型文件的更好方法
、、、
我有一个巨大的csv文件，我必须处理这个文件并做一些数据处理。现在，我正在缓冲区中读取/加载文件，然后进行数据处理工作。在文件非常大的情况下，我发现这种方法效率低下。
浏览 0提问于2020-08-15得票数 -4
3回答
上一个问题(初始级别优化)：Excel“大”数据处理与查找“
代码用途:根据新信息(由不同的宏提供)重新计算每列500 000行的25列。
浏览 0提问于2017-03-22得票数 4
回答已采纳
我已经使用pandas构建了一个数据处理工具。我的脚本接受2个非常大的excel文件(超过17000行)，转换成dfs，并汇总和合并这2个数据帧。这给我留下了最后一个df。
浏览 17提问于2021-02-03得票数 0
回答已采纳
2回答
解析日志文件的API
、、、
我正在寻找一个api，它可以帮助我解析日志文件，我可以从我的C#代码中调用它。我不需要查看器，因为不需要查看日志。需要解析才能为机器学习应用程序生成数据。因此，如果我提供路径，任何能够给出记录列表的api都足够好。
我试图自己找到它，但我只能找到日志查看器，它们试图以自己的风格显示数据，做大量的随机工作，拥有自己的UI和体系结构。我需要的只是他们的业务逻辑，最好是一个DLL，如果这有意义的话。如果它是以web服务的形式出现的，那也是可行的。只要我能够引用它，就可以调用一个函数，传递文件路径，并获得JSON或对象中解析的数据。
浏览 0提问于2017-09-15得票数 1
有人担心，如果要求托管这些数据三年，就会产生非常大的存储量，并且在使用Elasticsearch的情况下实现成本很高。另一种方法是将每天的数据处理成存储在S3中的report CSV，并使用Amazon Athena之类的工具执行查询。我们的应用程序是否可以向Athena发送即席查询，以响应web浏览器请求？
浏览 23提问于2020-08-12得票数 0
一般来说，任何云服务提供商，GCP在这种情况下，谷歌不是相关和强制性的，专门允许消费者为所有服务选择数据驻留和数据处理区域选项？否则，无服务器选项将会有严重的采用问题。请澄清。
浏览 0提问于2019-07-02得票数 0
我使用Google cloud中的GSUTIL命令行工具将文件从一个GCS文件夹复制到另一个GCS文件夹，然后进行一些数据处理。最近我在最终目标(BQ表)中发现了一些数据丢失，当我深入挖掘发现问题与文件复制有关时，当我复制大量文件时，3K~5K e，例如，似乎有些文件没有及时复制到目标文件夹，数据处理开始，这些文件最终被复制，但对于数据处理来说为时已晚在GSUTIL命令行工具中有任何标志/配置来确保复制完全完成吗？我一直使用的命令是: gsutil -m cp gs://fo
浏览 0提问于2015-05-20得票数 1
我想知道在这种情况下我应该使用哪个测试管理工具。我读过一些社区，人们认为我们不需要Cucumber的测试管理器工具，但我的问题是，我们可能会有一大堆测试用例，其中并不是所有的测试用例都是自动化的。在这种情况下，我们需要一个Test Repository来保存所有带有标记为Automated的测试用例。
我读了这篇文章，但这并没有回答我的问题：
浏览 1提问于2019-02-11得票数 0
1回答
我正在用生成图表，我遇到了一个问题--有几个节点非常大--以及大量的小节点。我尝试用和生成png，但两者都生成非常大的图形，这些图形大多是空白的(节点相距很远)。有没有办法为这些工具设置更大的弹簧“强度”，使节点更紧密地连接在一起？
浏览 2提问于2011-04-05得票数 12
回答已采纳
因此，我决定首先对它运行一个诊断工具，以获得一般概述。通过这个快照，我可以得到几个占用大量RAM的斑点。
但这似乎还不够。
浏览 0提问于2018-04-10得票数 0
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
腾讯云开发者
