腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Hadoop
YARN
版本
可能
的
流式
命令行
选项
的
完整
列表
是什么
?
hadoop
、
mapreduce
、
hadoop-yarn
、
hadoop-streaming
我浏览了
Hadoop
网站,找到了以下
hadoop
流
的
链接。https://
hadoop
.apache.org/docs/current1/streaming.html 但是,我对
Hadoop
YARN
(MRv2)流
命令行
选项
更感兴趣。如果有人有详尽
的
列表
,你能把它张贴在这里吗? 如果没有找到,请告诉我以下命令中是否有任何
命令行
选项
浏览 17
提问于2019-02-04
得票数 2
回答已采纳
1
回答
Cloudera CDH无法启动tez-ui
的
yarn
时间线服务器
hadoop
、
cloudera
、
hadoop-yarn
、
cloudera-cdh
、
apache-tez
当我通过在Cloudera Manager高级配置
选项
中将配置添加到
yarn
-site.xml来启用
yarn
时间服务器时: <name>
yarn
.timeline-service.hostname</name></property> <name>
yarn</e
浏览 3
提问于2015-12-11
得票数 1
2
回答
Hadoop
HPROF分析未写入CPU示例
java
、
hadoop
、
profiling
、
hprof
我想使用HPROF来分析我
的
Hadoop
工作。问题是我得到了TRACES,但profile.out文件中没有CPU SAMPLES。我在run方法中使用
的
代码是: Configuration conf = getConf(); conf.set("textinputformat.record.delimiter我在stderr上也有一些转换错误消息,但我认为这并不相关,因为当分析设置为false或启用分析
的
代码被注释掉时
浏览 6
提问于2014-09-23
得票数 3
2
回答
线程"main“java.lang.NoClassDefFoundError异常: org/apache/
hadoop
/
yarn
/exceptions/YarnRuntimeException
hadoop
、
mapreduce
、
hadoop-yarn
Failing the application.当我在容器日志中追踪这个错误
的
原因时,我遇到了这样
的
消息<groupId>org.apache.
hadoop
</groupId> <versio
浏览 0
提问于2017-04-17
得票数 2
1
回答
在EMR中无法重新启动Hue
hadoop
、
emr
、
hue
我无法在AWS EMR
Hadoop
集群中重新启动Hue。我已经修改了hue.ini文件,并希望重新启动apply.When色调,因为我运行了“服务色调重新启动”,它发出
的
是“命令未找到”错误。我使用
的
是Hue 3.7.1-amzn-7,emr-4.8.4和Amazon2.7.3
Hadoop
发行版. 提前谢谢。
浏览 1
提问于2017-05-01
得票数 1
回答已采纳
1
回答
无法查看职务历史记录(http://localhost:19888)页面在
Hadoop
中
的
web浏览器中)
hadoop
、
mapreduce
、
bigdata
、
hadoop-yarn
、
resourcemanager
我在Ubuntu 14.04 32位上使用了2.4.1
版本
的
。当我使用
hadoop
user_jar.jar命令运行一个示例作业时,我无法看到 (未找到页面)上
的
输出,这
可能
是什么
原因?提前谢谢你。</name> <name&g
浏览 2
提问于2015-03-08
得票数 2
6
回答
编译
Hadoop
2.2.0作业?
java
、
hadoop
、
compilation
似乎所有的示例都是在考虑到旧
版本
的
情况下构建
的
。我应该包含
的
jar文件在哪里? 命令
是什么
?
浏览 0
提问于2013-10-21
得票数 3
11
回答
Yarn
MapReduce作业问题-
Hadoop
2.3.0中
的
AM容器启动错误
java
、
hadoop
、
mapreduce
、
hadoop-yarn
如果查看stderr (作业日志),则只有一行"Could not find or load main class 614" 现在我已经用谷歌搜索过了,通常当你有不同
的
JAVA
版本
或者在
yarn
-site.xml<value>/opt/
yarn
/
hadoop
-2.3.0/etc/
hadoop
,/opt/
yarn
/
hadoop
-2.3.0
浏览 196
提问于2014-03-22
得票数 19
1
回答
Oozie war创建-不支持
的
Hadoop
版本
支持
的
版本
: 0.20.1、0.20.2、0.20.104、0.20.200、0.23.x和2.x
hadoop
、
oozie
我正在尝试在
hadoop
1.0.3上安装oozie 3.3.2,我无法按照中
的
说明创建oozie.war .I。我执行以下命令I get-不支持
的
Hadoop
版本
支持
的
版本
: 0.20.1,0.20.2,0.20.104,0.20.200,0.23.x和2.x ./$OOZIE_HOME/distro/target/oozie-3.3.2/oozie/bin/oozie-setup.sh -
浏览 0
提问于2013-05-11
得票数 2
回答已采纳
4
回答
从
hadoop
外部访问hdfs
hadoop
、
mapreduce
、
hdfs
我想使用存储在HDFS中
的
输入文件在
hadoop
之外(但在同一集群上)运行一些可执行文件。谢谢!
浏览 1
提问于2012-01-28
得票数 3
回答已采纳
1
回答
在
Hadoop
上为SAS建模过程
sas
Hadoop
上一些建模过程。有没有人知道这些PROCs,或者更了解,有没有一个详尽
的
列表
?谢谢。 克里斯蒂安
浏览 2
提问于2017-02-09
得票数 0
回答已采纳
3
回答
星火作业在纱线群集模式下失败
apache-spark
可能
是什么
原因??这是
完整
的
错误日志:at org.apache.
hadoop
.
yarn
.util.FSDownload.access$0
浏览 4
提问于2015-09-21
得票数 4
3
回答
hadoop
引发无法找到或加载主类org.apache.
hadoop
.mapreduce.v2.app.MRAppMaster。
hadoop
、
amazon-s3
、
distcp
当我运行distcp将数据从s3移动到本地hdfs时,在为复制数据而启动
的
map还原作业期间会得到此异常:我检查了所有
可能
的
在线文章。我
的
yarn
-site.xml文件包含 对于集群
的
每个节点,我检查并设置了这些变量并指向正确
的
文件夹,实际上,<property>
浏览 3
提问于2015-08-13
得票数 0
4
回答
Hadoop
2.7.2-错误:无法找到或加载主类org.apache.
hadoop
.hdfs.server.namenode.NameNode
hadoop
、
ubuntu-15.10
、
hadoop-2.7.2
我是新手,我想找出解决这个问题
的
办法。PATH=$PATH:$
HADOOP
_INSTALL/bin export
HADOOP
_HDFS_HOME=$
HADOOP
_IN
浏览 4
提问于2016-01-31
得票数 0
2
回答
如何在Cloudera中安装自定义火花
版本
hadoop
、
apache-spark
、
cloudera
我是星火,哈多普和克劳德拉
的
新手。我们需要使用一个特定
版本
(1.5.2)
的
星火,还需要使用Cloudera用于集群管理,也用于星火。人们提到“只需下载”一个定制
版本
的
火花手动。但是如何通过Cloudera管理这个“自定义”星火
版本
,这样我就可以在集群中分发它了?或者,它是否需要完全独立于Cloudera
的
操作和供应?谢谢你
的
帮助和解释。
浏览 3
提问于2016-02-23
得票数 0
1
回答
使用不同
的
hadoop
-mapreduce-client-core.jar运行
hadoop
集群
hadoop
、
jar
、
java-opts
我在一个安装了CDH4.2.0
的
hadoop
集群上工作,结果遇到了错误。在更高
版本
的
hadoop
中已经修复了这个问题,但是我没有更新集群
的
权限。有没有一种方法可以告诉
hadoop
在通过
命令行
参数运行作业时使用这个jar
hadoop
jar MyJob.jar -D
hadoop
.mapreduce.client=
hadoop
-mapreduce-client-core-2.0.0-cdh4.2.0
浏览 1
提问于2013-04-25
得票数 1
回答已采纳
1
回答
在
hadoop
上以群集模式运行mahout
的
fpg算法
hadoop
、
mahout
我以multi_node
的
身份在linux (centos).
hadoop
上安装了mahout-0.7和
hadoop
-1.2.1。我创建了一个名为
hadoop
的
用户,并将mahout和
hadoop
安装在path /home/
hadoop
/opt/我设置了MAHOU_HOME、
HADOOP
_HOME和MAHOUT_LOCAL,...在用户环境
hadoop
的
.bashrc文件中 #
浏览 2
提问于2015-01-27
得票数 0
2
回答
“错误:在运行submit或org.apache.spark.deploy.
yarn
.ExecutorLauncher”时无法找到或加载主类PySpark
apache-spark
、
hadoop
、
pyspark
、
bitnami
我试图在
Hadoop
集群上运行星火提交命令,这里是我
的
Hadoop
集群
的
总结:已在我
的
fileSPARK_DIST_CLASSPATH中设置了
HADOOP
_HOME、SPARK_HOME和
HADOOP
_CONF_DIR,并且在spark-env.shAddedspark.master
浏览 5
提问于2022-07-25
得票数 0
1
回答
理解mapreduce.framework.name wrt
Hadoop
hadoop
、
mapreduce
、
hadoop-yarn
、
hadoop2
、
mrv2
我正在学习
Hadoop
,并逐渐认识到该框架有两个
版本
,即
Hadoop
1和
Hadoop
2。如果我
的
理解是正确
的
,在
Hadoop
1、中,执行环境基于两个守护进程,即TaskTracker和JobTracker,而在
Hadoop
2 (又名纱线)中,执行环境基于“新守护进程”,即ResourceManager我了解了以下配置参数: 它
可能
采取
的
值:local、classic
浏览 0
提问于2018-03-05
得票数 1
回答已采纳
2
回答
小文件内存中
的
Hadoop
MapReduce
java
、
hadoop
、
amazon-web-services
、
mapreduce
、
elastic-map-reduce
因此,我们在HDFS中有大约300万~7kb
的
文件。如果我们对这些文件
的
一小部分(一个文件夹,
可能
是10,000个文件)运行我们
的
任务,我们就不会遇到麻烦。如果我们对
完整
的
文件
列表
运行它,就会得到内存不足
的
错误。我假设正在发生
的
事情是这样
的
--不管JVM运行
的
是什么
--定义输入分块
的
进程正变得不堪重负,试图处理300万个文件,它使用了太多
的
内存,
浏览 4
提问于2015-11-20
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
一文看懂大数据领域的六年巨变
五大最佳数据框架的快速比较
YARN 在字节跳动的优化与实践
CDP-DC中部署Yarn
奇虎360开源深度学习调度平台XLearning
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券