腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(3349)
视频
沙龙
2
回答
弹性
MapReduce
中可用
的
减速器
、
、
、
、
我希望我这样问是对
的
。我正在学习关于
弹性
MapReduce
的
方法,我看到了许多关于“聚合”减速器
的
引用,它可以与“流”作业流一起使用。在亚马逊
的
“亚马逊
弹性
MapReduce
简介”中,它指出“亚马逊
弹性
MapReduce
有一个名为aggregrate
的
默认减速器”。 我想知道
的
是:还有其他可用
的
默认还原器吗?我知道我可以写我自己
的
减速机,但我不想
浏览 3
提问于2009-12-22
得票数 12
回答已采纳
2
回答
是否可以将AutoScaling与
弹性
映射推理结合使用?
、
我想知道,我是否可以使用AutoScaling自动升级或下降亚马逊
的
Ec2容量,根据cpu
的
利用率与
弹性
地图减少。例如,我只使用一个实例启动
mapreduce
作业,但是如果该实例达到50%
的
利用率(例如,我希望使用创建
的
AutoScaling组来启动一个新实例)。这有可能吗? 你知道这是否可能吗?或者
弹性
mapreduce
,因为它是“
弹性
的
”,如果它需要自动启动更多
的
实例而没有任何配置?
浏览 3
提问于2015-04-24
得票数 0
回答已采纳
1
回答
Hadoop入门
的
最简单方法
、
我正在寻找提交
MapReduce
作业
的
最简单方法。我还阅读了以下答案,但没有找到我想要
的
:和
浏览 2
提问于2012-11-03
得票数 1
回答已采纳
2
回答
亚马逊上
的
MapReduce
/帐户管理
、
我是AWS
的
新手。2-我们将使用Amazon AWS来熟悉map-reduce。我们更喜欢最简单
的
。我们希望首先使用一台计算机,并在大数据集上运行map-reduce功能,看看这个过程需要多长时间,然后使用4和8系统再次测试,以了解差异。 3-我们应该使用什么语言来减少地图。我们应该
浏览 1
提问于2013-10-31
得票数 0
1
回答
从应用程序运行
弹性
Mapreduce
查询
、
、
我在
弹性
mapreduce
上运行了交互模式
的
蜂巢:在脚本模式下:我希望在我自己
的
服务器上有一个应用程序(最好是PHP、R或Python)能够旋转一个
弹性
mapreduce
集群并运行几个Hive命令,同时以可解析
的
形式获得它们
浏览 6
提问于2012-12-21
得票数 0
1
回答
错误:在运行
弹性
-
mapreduce
指定分布式缓存文件时,字符串
的
未定义方法"each“
、
、
undefined method `each' for "s3n://dico-count-words/Cache/dicoClazz.p#dicoClazzCache.p":String .在创建其他不需要分布式缓存文件
的
集群时,运行类似的命令没有任何问题。我还成功地使用AWS控制台运行了这个任务。但我更愿意通过CLI来做
浏览 2
提问于2014-11-11
得票数 4
2
回答
在
哪里
设置配置
mapreduce
.job.jvm.numtasks?
、
我在一本书(专业Hadoop )中读到,可以通过指定作业配置
mapreduce
.job.jvm.numtasks来启用JVM重用。我
的
问题是,我们需要在驾驶类中设置这个吗?我试图在
mapreduce
.Job对象中查找这个配置,但没有找到它。在我正在使用
的
Hadoop版本
的
其他地方,这个API能被替换吗?还是我找错地方了?我正在使用Hadoop版本1.0.3。我也试图寻找老
的
财产mapred.job.reuse.jvm.num.tasks,但我做不到。 谢谢!
浏览 2
提问于2014-10-19
得票数 0
回答已采纳
1
回答
如何定义亚马逊
弹性
MapReduce
上引导操作
的
超时?
、
如何更改亚马逊
弹性
MapReduce
上引导操作
的
超时?
浏览 0
提问于2011-11-13
得票数 4
2
回答
在Amazon
的
弹性
mapreduce
实例上推出了什么AMI?
、
我还没有找到在Amazon
弹性
mapreduce
实例上运行
的
AMI。您不能指定一个实例,但是可以通过运行一个引导操作来自定义
mapreduce
实例。不过,我想知道我是怎么开始
的
。
浏览 0
提问于2011-03-30
得票数 2
回答已采纳
1
回答
在外部蜂巢表(Hive 2.3.6)上执行MSCK修复表时出错
、
我根据S3中
的
分区Parquet文件创建了一个外部Hive表,使用类似于以下语句
的
语句:(我是否走在正确
的
道路上,为什么会
浏览 3
提问于2020-03-13
得票数 2
1
回答
在上
的
弹性
MapReduce
上定义HDFS文件
、
、
我开始在Hadoop KMeans框架上实现
MapReduce
算法。在这方面,我使用了提供
的
弹性
MapReduce
。我想要创建一个HDFS文件,以保存初始集群坐标,并在其上存储还原器
的
最终结果。
浏览 0
提问于2014-04-30
得票数 1
回答已采纳
1
回答
你们这个文档maven给
的
是hbase-client,下面参考是thrift?
、
、
请描述您
的
问题地址:https://cloud.tencent.com/document/
浏览 375
提问于2018-01-19
1
回答
请问oozie如何创建shell脚本运行?
、
请描述您
的
问题地址:https://cloud.tencent.com/document/product
浏览 409
提问于2018-02-07
2
回答
Amazon
Mapreduce
中运行
的
pig脚本中
的
STREAM关键字
、
、
、
我可以在我自己
的
hadoop环境中这样做,但是当我在Amazon map reduce WS中运行我
的
脚本时,我总是失败。
浏览 0
提问于2010-01-24
得票数 0
回答已采纳
3
回答
地图缩减框架/基础设施
、
、
、
地图减少是一种模式,最近似乎得到了很多牵引力,我开始看到它体现在我
的
一个项目,重点是一个事件处理管道(iPhone加速度计和全球定位系统数据)。我需要为这个项目构建大量
的
基础设施,实际上它比与它交互
的
逻辑代码重2倍。我构建
的
一些组件包括EventProcessors (包括输入和输出缓冲区、定时等)、EventListeners、聚合器和分阶段管道。 这就引出了我
的
问题:地图缩减所需
的
“公共”基础设施是什么?由于我经常使用.Net,所以我可以看到在框架和语言构造中内置
的
浏览 9
提问于2010-03-15
得票数 6
回答已采纳
1
回答
如何在App Engine Data Store中添加列后更新索引?
、
、
我使用
的
是Google Cloud数据存储。我已经向实体添加了一个索引列。对于要在查询中显示
的
现有实体,文档说明需要再次保存所有实体。在一个令人愉快
的
世界中,AppEngine控制台中会有一个按钮来重新索引该列。显然,我们并不生活在一个幸福
的
世界里。这是后来被删除
的
Servle
浏览 0
提问于2017-12-12
得票数 1
1
回答
如何在.Net中找到与Amazon相关
的
资源数量
、
、
、
我需要在.Net中找到与Amazon相关联
的
资源数量。自动缩放组数ElastiCache簇数
弹性
负载平衡器数目红移簇
浏览 0
提问于2019-07-17
得票数 0
1
回答
从
弹性
MapReduce
HDFS中获取数据
、
它可以在我
的
单节点Hadoop设置上工作,我很想让它在
弹性
MapReduce
中
的
10个节点上工作。./elastic-
mapreduce
--create --alive./elastic-
mapreduce
-j $JOBID --ssh "hadoop fs -cp s3://bucket-id&
浏览 0
提问于2011-10-09
得票数 3
回答已采纳
2
回答
弹性
MapReduce
的
Post钩子
、
、
、
我想知道是否有电子病历(
弹性
MapReduce
)
的
后期处理
的
例子?我试图实现
的
是在亚马逊
的
Hadoop完成工作后立即发送一封电子邮件给一群人。
浏览 1
提问于2013-04-04
得票数 4
回答已采纳
3
回答
亚马逊
弹性
MapReduce
:输出目录
、
、
、
我正在运行亚马逊运行
弹性
MapReduce
的
示例,并经常遇到以下错误: C:\ruby\elastic-
mapreduce
-cli>ruby elastic-
mapreduce
--create --stream \
浏览 11
提问于2012-07-29
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
弹性MapReduce
哪里的USDT泰达币最便宜?
北京大件物流上门取货便宜的在哪里?
MapReduce 的优点是什么?
机票降价榜,看看你的城市飞哪里最便宜>>
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券