腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
map
reduce
可以做哪些工作,而apache crunch不能?
mapreduce
、
apache-crunch
据我所知,crunch是一个基于
map
-
reduce
框架
的抽象
框架
。我打算使用crunch而不是
map
-
reduce
框架
。 我的问题是,
map
-
reduce
可以做哪些工作,而crunch不能?
浏览 4
提问于2015-12-22
得票数 2
2
回答
map
reduce
框架
如何确定在
map
完全完成之前运行
reduce
?
hadoop
、
mapreduce
我注意到,通常在hadoop集群不忙的时候,在
map
端完全完成之前,
reduce
端就开始运行了?那件事怎么可能?我记得在某处读到的
reduce
进度指示器有点误导,但记不清了。有没有人能解释一下?
浏览 0
提问于2012-05-23
得票数 1
回答已采纳
1
回答
Map
reduce
框架
中
map
阶段的实现
hadoop
、
mapreduce
我搜索了很多,我知道在每个映射任务中,当缓冲区的内容到达阈值时,一个线程根据reduces.what的数量对数据进行分区,这里是
reduce
numbers的作用吗?为什么会在
map
中发生分区?
浏览 0
提问于2013-02-01
得票数 0
1
回答
分布式
Map
/
Reduce
框架
c#
、
wcf
、
hadoop
、
mapreduce
、
apache-storm
我正在寻找.net分布式
map
/
reduce
框架
。我打算将其用于实时数据查询,并在多个节点上并行处理查询。我目前正在使用WCF来实现web层和应用层之间的通信。 例如,如果我有5个节点,内存中有数据。我只是想知道是否已经有一个
框架
可以映射作业并减少返回的结果。我看起来更像风暴中的Nimbus (Twitter实时地图/
reduce
)。不能使用nimbus,因为有很多复杂的问题。我试图使用
框架
实现以下目标: 1)将作业(主要是发送到所有可用节点的请求)映射到可用节点,并
浏览 0
提问于2013-01-15
得票数 2
回答已采纳
2
回答
在
Map
/
Reduce
框架
中的何处添加特定函数
hadoop
、
mapreduce
、
distributed-computing
我对
MAP
/
Reduce
框架
有一个一般性的问题。在
Map
阶段运行算法,以便在
reduce
阶段,除了从
Map
阶段收集每个分区的结果并进行汇总之外,不需要执行任何工作 在
Map
阶段,只需划分分区(包含数据)并将其发送到
reduce
阶段。在
r
浏览 3
提问于2014-07-06
得票数 0
10
回答
简单的Java
Map
/
Reduce
框架
java
、
mapreduce
谁能给我推荐一个简单的、开源的Java
Map
/
Reduce
框架
/API?似乎没有太多证据表明这样的事情存在,但其他人可能知道不同的情况。我不需要运行分布式作业的能力,只需要使用标准Java5样式的并发在一个JVM中的多核机器上运行
map
/
reduce
样式的作业即可。 自己写并不是一件很难的事情,但我宁愿不用写。
浏览 0
提问于2011-03-10
得票数 49
回答已采纳
3
回答
针对of级数据的
Map
Reduce
算法?
analysis
、
mapreduce
我对在集群上对of级数据运行
Map
Reduce
算法很感兴趣。我应该读什么书? 我对设置
Map
Reduce
集群或运行标准算法不感兴趣。编辑:问题不在于
map
减少了运行时间。问题是--大多数算法不能很好地分布到
map
reduce
框架
。我对在
map
reduce
框架
上运行的算法很感兴趣。
浏览 1
提问于2010-02-10
得票数 4
1
回答
在Mongo DB的
map
reduce
框架
中有没有组合器阶段
mongodb
、
mapreduce
、
combiners
在Mongo DB的
Map
reduce
框架
中有没有类似于Combiner的东西(如Hadoop
map
Reduce
)。我们正在Mongo DB集群中尝试
map
reduce
框架
,在发送到
reduce
阶段之前,有几行键可以潜在地组合在一起。1 billion records which I'm going to
map
-
reduce
10
浏览 1
提问于2013-05-15
得票数 1
2
回答
对聚合使用
Map
Reduce
的MongoDB
mongodb
、
mapreduce
从那时起,Javascript 2.4提供了多线程
Map
Reduce
(在切换到V8 Javascript引擎之后),并且比以前的版本更快,所以速度慢的论点不是问题。然而,我正在寻找一种场景,其中
Map
Reduce
方法可能比聚合
框架
工作得更好。实际上,可能会出现这样一种情况:聚合
框架
根本无法工作,但
Map
Reduce
可以获得所需的结果。 谢谢,约翰
浏览 0
提问于2013-08-25
得票数 0
5
回答
Map
Reduce
中的
Map
Reduce
apache
、
hadoop
、
mapreduce
、
parallel-processing
我使用Hadoop开发
Map
/
Reduce
。我的驱动程序向Hadoop的作业跟踪器提交一个MapReduce作业(包含
Map
和
Reduce
任务)。我有两个问题: a)我的
Map
或
reduce
任务是否可以提交另一个MapReduce作业?(使用相同的群集Hadoop和到相同的Job Tracker)。这意味着,我的初学者驱动程序提交一个mapreduce作业,在这个作业中,它的
map
或
reduce
任务产生另一个MapReduce作业,并将其提交
浏览 1
提问于2012-03-15
得票数 2
1
回答
MapReduce映射
java
、
mapreduce
我正在学习MapReduce
框架
,并对此有以下问题: MapReduce范式本质上有
map
()和
reduce
() (以及其他几个)。所有编程逻辑能否有效地表示为
map
()或
reduce
()?例如,假设我想对一棵树进行有序遍历.这个任务能否有效地划分为一个
map
()和
reduce
()任务?如果是,怎么做?如果不是,那么我如何利用MapReduce
框架
来完成这个任务?()而没有相应的
reduce
(),反之亦然?根据和,
redu
浏览 0
提问于2018-03-15
得票数 0
回答已采纳
1
回答
Map
-降低MongoDb 2.2、2.4和2.6中的性能
mongodb
、
mapreduce
我找到了这个讨论:。基本上,它说尽量避免Mongo的MR查询,因为它是单线程的,根本不应该是实时的。两年过去了,我想知道从那以后发生了什么变化。现在我们有了MongoDb 2.2。我听说MRs现在是多线程的。请分享你的想法在MR使用的实时请求,如获取数据的web应用程序频繁的http请求。它能有效地使用索引吗?
浏览 1
提问于2012-10-02
得票数 29
回答已采纳
1
回答
在mongodb中,哪些示例只能使用
map
reduce
而不能使用聚合
框架
?
mongodb
、
mapreduce
、
aggregation-framework
我想知道一些与Mongo DB相关的例子或场景,它们可以通过
map
-
reduce
来完成,但不能通过聚合
框架
来完成?谢谢&致以最良好的问候。
浏览 0
提问于2013-02-24
得票数 0
回答已采纳
4
回答
Hadoop
Map
/
Reduce
与内置
Map
/
Reduce
mongodb
、
hadoop
在MongoDB上使用Hadoop /
reduce
和Mongo的内置
map
/
reduce
进行
map
/
reduce
工作的主要区别是什么? 我什么时候选择哪个
map
/
reduce
引擎?
浏览 0
提问于2012-02-15
得票数 22
回答已采纳
2
回答
D语言中的
Map
-
reduce
框架
mapreduce
、
d
寻找任何用D编写的
map
-
reduce
框架
(即使是最小的)。谢谢。
浏览 2
提问于2014-01-15
得票数 3
1
回答
Mongodb聚合
框架
比
map
/
reduce
更快吗?
performance
、
mongodb
、
mapreduce
、
aggregation-framework
mongodb 2.2中引入的聚合
框架
与
map
/
reduce
相比有什么特殊的性能改进吗?(我已经为自己做了一个测试,性能几乎是一样的)
浏览 0
提问于2012-12-17
得票数 55
回答已采纳
1
回答
如何在mongo
map
reduce
函数中处理大数组数据集
mongodb
、
mapreduce
我有一个
map
/
reduce
作业,它构建一个数组,
reduce
执行数组连接。有时,生成的文档似乎达到了最大bson大小限制,
map
reduce
失败,并出现"value太大,无法减少“的错误。
浏览 2
提问于2012-08-28
得票数 1
1
回答
混洗和排序阶段是映射还是减少阶段的一部分?
hadoop
、
mapreduce
、
hadoop2
我的理解是,在mapreduce编程模型中,
map
和
reduce
是两个阶段。完成映射阶段后,将生成中间(键、值)值,并将这些值传递给缩减程序。 我怀疑在
map
()阶段之后,混洗和排序将会到来。
浏览 0
提问于2016-08-25
得票数 1
6
回答
分布式计算应用程序
java
、
.net
、
linux
、
distributed
、
hadoop
Map
reduce
/Hadoop是一种用于分布式系统的
框架
/程序。 还有其他一些流行的
框架
/程序吗?
浏览 1
提问于2010-01-30
得票数 0
回答已采纳
2
回答
如何组合20000多个uniq密钥?
mongodb
、
pymongo
我有两个例子:
reduce
="function(obj,prev) {}" )和:"function () {""}"
浏览 2
提问于2012-01-07
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
MapReduce之Map和Reduce阶段
python snippet:ProgBar,map,reduce,filter
Python的sum、map、filter和reduce
图解Hive sql之map reduce过程
list分片与推导+map&reduce
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券