腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从应用程序运行
弹性
Mapreduce
查询
、
、
我在
弹性
mapreduce
上运行了交互模式的蜂巢:在脚本模式下:我希望在我自己的服务器上有一个应用程序(最好是PHP、R或Python)能够旋转一个
弹性
mapreduce
但有没有办法做这样的假设:
创建
蜂巢表custom
浏览 6
提问于2012-12-21
得票数 0
2
回答
是否可以将AutoScaling与
弹性
映射推理结合使用?
、
我想知道,我是否可以使用AutoScaling自动升级或下降亚马逊的Ec2容量,根据cpu的利用率与
弹性
地图减少。例如,我只使用一个实例启动
mapreduce
作业,但是如果该实例达到50%的利用率(例如,我希望使用
创建
的AutoScaling组来启动一个新实例)。这有可能吗? 你知道这是否可能吗?或者
弹性
mapreduce
,因为它是“
弹性
的”,如果它需要自动启动更多的实例而没有任何配置?
浏览 3
提问于2015-04-24
得票数 0
回答已采纳
1
回答
在上的
弹性
MapReduce
上定义HDFS文件
、
、
我开始在Hadoop KMeans框架上实现
MapReduce
算法。在这方面,我使用了提供的
弹性
MapReduce
。我想要
创建
一个HDFS文件,以保存初始集群坐标,并在其上存储还原器的最终结果。是否有
创建
或“上传”该文件到HDFS格式,以便让所有映射者看到。谢谢。
浏览 0
提问于2014-04-30
得票数 1
回答已采纳
2
回答
弹性
MapReduce
中可用的减速器
、
、
、
、
我正在学习关于
弹性
MapReduce
的方法,我看到了许多关于“聚合”减速器的引用,它可以与“流”作业流一起使用。在亚马逊的“亚马逊
弹性
MapReduce
简介”中,它指出“亚马逊
弹性
MapReduce
有一个名为aggregrate的默认减速器”。 我想知道的是:还有其他可用的默认还原器吗?
浏览 3
提问于2009-12-22
得票数 12
回答已采纳
1
回答
Hadoop入门的最简单方法
、
我正在寻找提交
MapReduce
作业的最简单方法。我还阅读了以下答案,但没有找到我想要的:和 谢谢。
浏览 2
提问于2012-11-03
得票数 1
回答已采纳
3
回答
将配置表导出到S3存储桶
、
、
、
我已经通过一个
弹性
MapReduce
交互式会话
创建
了一个配置单元表,并使用CSV文件填充它,如下所示:现在,我希望将配置单元表存储在S3存储桶中,以便在终止
MapReduce
浏览 118
提问于2012-02-29
得票数 22
回答已采纳
2
回答
如何终止/删除Amazon中的作业流?
、
、
、
、
我使用亚马逊
弹性
MapReduce
(Amazon )
创建
了一个工作流程,但由于一些未知的原因,它失败了。然后,我试图通过AWS管理控制台终止作业流,但是“终止”按钮被禁用。然后,我尝试使用CLI终止作业流,它显示了作业流被终止,但是当通过CLI和管理控制台中的
弹性
MapReduce
选项卡看到它时,它仍然显示为在作业流列表中失败。调试功能对此作业流不可用,因为
创建
它时没有指定亚马逊S3日志路径。
浏览 4
提问于2012-04-14
得票数 3
回答已采纳
1
回答
将元数据从metastore(derby)迁移到Hive 2.4.3
、
、
、
我刚刚部署了Hive 2.4.3,但是在老版本的Hive 1.2上只有很少的表有分区,我使用Derby作为元数据存储。 将它们迁移到新安装的Hive的最佳方式是什么?
浏览 9
提问于2019-06-18
得票数 0
1
回答
如何定义亚马逊
弹性
MapReduce
上引导操作的超时?
、
如何更改亚马逊
弹性
MapReduce
上引导操作的超时?
浏览 0
提问于2011-11-13
得票数 4
1
回答
Kafka中kafka.common.OffsetOutOfRangeException异常的原因是什么
我正在使用Kafka Mirrormaker来模拟到运行Spark的
弹性
MapReduce
集群的生产流量。下面是我的设置:2) Kafka Mirrormaker的第二个实例使用1)中
创建
的测试Kafka实例,并发布到新的Kafka集群1)杀死我正在运行的Mirrormaker3)<em
浏览 0
提问于2018-12-28
得票数 0
2
回答
在Amazon的
弹性
mapreduce
实例上推出了什么AMI?
、
我还没有找到在Amazon
弹性
mapreduce
实例上运行的AMI。您不能指定一个实例,但是可以通过运行一个引导操作来自定义
mapreduce
实例。不过,我想知道我是怎么开始的。
浏览 0
提问于2011-03-30
得票数 2
回答已采纳
1
回答
允许多个hadoop/EMR任务在关闭前失败
、
、
、
我试图在亚马逊
弹性
MapReduce
上使用hadoop,在那里我要执行数千个地图任务。如果有一小部分任务失败了,我很好,但是,Amazon关闭了任务,当第一个映射器失败时,我会失去所有的结果。
浏览 4
提问于2013-10-07
得票数 1
回答已采纳
2
回答
使用
弹性
MapReduce
(PIG)处理云前端日志
、
、
、
我想处理亚马逊CloudFront使用亚马逊
弹性
MapReduce
创建
的访问日志。我是elastic
mapreduce
的新手,所以欢迎任何关于如何构建这类工作的提示。
浏览 0
提问于2010-11-01
得票数 0
回答已采纳
1
回答
在外部蜂巢表(Hive 2.3.6)上执行MSCK修复表时出错
、
我根据S3中的分区Parquet文件
创建
了一个外部Hive表,使用类似于以下语句的语句:()STORED AS parquet
创建
了该表
浏览 3
提问于2020-03-13
得票数 2
4
回答
是否可以使用.NET为亚马逊
弹性
MapReduce
编写map/reduce作业?
、
、
是否可以使用.NET语言为Amazon Elastic
MapReduce
()编写map/reduce作业?特别是,我想使用C#。上面的情况表明这是不可能的。例如,我可以修改我的账户的
弹性
MapReduce
机器镜像,并在上面安装Mono吗?也许更明智的选择是尝试放弃Elastic Hadoop的便利性,在EC2上
浏览 4
提问于2009-07-27
得票数 13
回答已采纳
1
回答
如何为嵌套目录结构定义分区表
、
、
、
、
row format delimited fields terminated by ',' location '/user/hadoop/air/'; 表是由hive和“`spark”
创建
和访问的
浏览 1
提问于2019-03-08
得票数 1
回答已采纳
1
回答
配置单元-复制带有分区的数据库架构,并在另一个配置单元实例中重新
创建
、
、
、
、
我已经将一个数据库的数据和文件夹结构从一个HDFS实例复制到另一个HDFS实例。 如何对配置单元元数据执行相同的操作?我需要新的HDFS实例的hive使用它们现有的分区来定义这个数据库和它的表,就像它在原始位置一样。当然,它们通常需要随着hdfs外部表位置的更新而维护其原始模式。 乐于使用直接的hive命令、spark或任何开源且随时可用的通用CLI实用程序。我没有实际的hadoop集群(这是云存储),所以请避免回答依赖于map reduce/etc的问题(比如Sqoop)。
浏览 16
提问于2019-05-15
得票数 1
回答已采纳
1
回答
错误:在运行
弹性
-
mapreduce
指定分布式缓存文件时,字符串的未定义方法"each“
、
、
undefined method `each' for "s3n://dico-count-words/Cache/dicoClazz.p#dicoClazzCache.p":String ./elastic-
mapreduce
--create --stream \ > --input s3n:/
浏览 2
提问于2014-11-11
得票数 4
1
回答
你们这个文档maven给的是hbase-client,下面参考是thrift?
、
、
请描述您的问题地址:https://cloud.tencent.com/document/
浏览 362
提问于2018-01-19
1
回答
请问oozie如何
创建
shell脚本运行?
、
请描述您的问题地址:https://cloud.tencent.com/document/product
浏览 398
提问于2018-02-07
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
弹性MapReduce
MapReduce(一)
MapReduce详解
MaxCompute MapReduce
Hadoop核心 MapReduce
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券