我一直在查找Spark和MapReduce之间的区别，我真正发现的是Spark在内存和磁盘上运行，这使得它的速度大大加快。但想必，使用Spark，您无论如何都会在内存和磁盘之间移动数据，因此如果内存空间不足，您可以将一些数据移回磁盘，然后引入新数据进行处理。
浏览 0提问于2018-05-02得票数 0
正如标题所说，如何对文件进行排序？如果你的PC内存只有2 2GB，但是有100亿个URL (假设最长的URL是256个字符)。
浏览 1提问于2014-07-18得票数 0
Mongodb可以与hadoop集成以进行更快的数据处理，但在此集成过程中( mongodb -> hadoop )，数据会从mongodb传输到hadoop。问题是，2.数据传输( mongodb -> hadoop )是一次性活动吗?如果是，mongodb的后续更新将如何反映在hadoop中。
浏览 2提问于2014-09-01得票数 3
6回答
如何搭建Hadoop处理环境？
、、、、
Apache Hadoop 是用于开发在分布式计算环境中执行数据处理应用程序的框架。旨在从单个服务器提供存储和计算资源的方式扩展到数千台机器。Apache Hadoop的核心部分由存储部分（Hadoop分布式文件系统）及其数据处理部分（MapReduce）组成。Hadoop将文件分割成大块，并将它们分发到群集中的节点上。那么如何搭建Hadoop处理环境？
浏览 2083提问于2018-10-24
Hadoop到底是干什么用的，主要的应用场景和应用领域是什么，主要解决的核心问题又是什么，我们个人可以用它来干什么 产生价值呢?
浏览 1000提问于2020-09-24
1回答
我听说Hadoop是一个很棒的数据处理工具，一旦MongoDB连接到，它就可以提高性能。它能很好地处理Map Reduce，但它对我这个不包含任何Map Reduce函数的例子有用吗？此外，如果我在MongoDB中使用Map Reduce并连接Hadoop，性能将如何提高？
浏览 0提问于2014-04-25得票数 0
Hadoop地图-减少和它的回声系统(如蜂巢..)我们通常用于批处理。但是我想知道是否有任何方法可以使用hadoop MapReduce作为实时数据处理的例子，比如实时结果，实时tweet。如果不是，实时数据处理或分析的替代方案是什么？
浏览 0提问于2018-12-18得票数 2
回答已采纳
这些文章分几部分编写，例如，我从IBM developer works获得了这些文章：
使用Hadoop的分布式数据处理，第2部分:更进一步
我将把这三篇文章分别编入索引。
浏览 1提问于2010-07-18得票数 2
我们的MySQL和Hadoop平台部署在不同的网络中，Hadoop不能访问MySQL，但是MySQL可以连接到Hadoop。顺便说一句，Hadoop集群在我们的网络中使用了一个Kafka主题，通过在两边部署水槽并连接在一起。但是对于海量的RDS数据，如何实现这一点呢？
浏览 1提问于2019-02-20得票数 0
1回答
您好，我是开放的决定，选择Netty或Mina为我的TCP/UDP服务器，我是两个框架的新手，不知道他们中的任何一个支持(S) P2P转换，以便一些海量的数据处理可以更有效地处理？
浏览 5提问于2015-06-15得票数 0
1回答
我正在考虑将PyTables或MongoDB与PyMongo (或者Hadoop -谢谢)一起使用。是否有其他我应该考虑的文件结构/DB？
我要做的一些操作是计算一个点到另一个点的距离。
浏览 5提问于2012-10-08得票数 3
回答已采纳
Hadoop更常用于从我从internet.But找到的海量数据中查询特定信息。我想探索HDFS，以便能够取代昂贵的SAN。你能提供一些关于这方面的信息，或者是关于这方面的好文章吗？
浏览 1提问于2013-06-27得票数 0
随着see在市场上的增长，我可以看到spark在Hadoop上的主要用例如下：
而且处理得很快。
火花会在未来几天取代Hadoop吗？当火花并行运行时，Hadoop同时工作？(这是真的吗？)
浏览 0提问于2015-07-08得票数 3
回答已采纳
有人能告诉我如何在apache hadoop中执行我的HelloWorld.java吗？
浏览 0提问于2011-02-02得票数 0
回答已采纳
我选择Hadoop进行数据处理，并在我的一个包含大量数据的项目中使用MongoDB进行存储。我配置并安装了hadoop，并执行了中给出的示例，该示例具有读取给定文本文档中出现的单词的次数的示例，并且运行良好。但是，当我尝试寻找一个简单的Java示例时，它将连接到MongoDB并执行简单的数据处理，例如，表中存储的记录数量属于某个简单条件(name like '%John%')。
有人有什么建议吗？
浏览 1提问于2013-05-24得票数 0
回答已采纳
1回答
目标是学习hadoop，而不是图像处理。因此，谁能建议我应该使用什么语言，c++或java，以及3d渲染器的一些标准实现。任何其他的帮助都是非常有用的。
浏览 0提问于2010-09-13得票数 1
1回答
我计划在我的基于web的应用程序中实现Hadoop框架。但我只是将其托管在本地主机中。我计划实现mapreduce和hdfs作为分布式文件系统。问题是，我要做的第一步是什么？我应该从什么开始呢？我对Hadoop框架进行了深入的研究。了解它是如何工作的，并尝试使用互联网上的wordcount示例。
浏览 2提问于2015-02-04得票数 0
Storm与Hadoop相比如何？hadoop似乎是开源大规模批处理的事实标准，Storm比Hadoop有什么优势吗？或者它们是完全不同的？
浏览 1提问于2012-06-29得票数 29
回答已采纳
我们需要跟踪不同时间段的用户活动，如24小时，7天等。我们预计不会有很大数量的不同时期，但用户数量将非常大，可能在数百万。每晚cronjob汇总每个用户的统计数据听起来并不合理。我知道过去我曾用RRD表这样跟踪网络使用情况，但这些只是BerkeleyDB的，而且每个统计数据必须有一个文件，这是行不通的，但这个想法似乎是我想要的。有没有我忽略的模式/最佳实践？
浏览 1提问于2011-12-31得票数 2
回答已采纳
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
腾讯云开发者
