我正在为一个大数据学科的大学项目使用linux。我使用Intellij构建了一个jar,并通过Hadoop对其进行分析。该项目由3个作业组成。在分析了第一个作业之后,shell上出现了以下错误:> at org.apache.hadoop.mapred.YARNRunner.getJobStatus(YARNRunner
我正在尝试自学一些hadoop基础知识,因此构建了一个简单的hadoop集群。这是可行的,我可以将,ls,cat从hdfs文件系统中放入,没有任何问题。因此,我进行了下一步,尝试对放入hadoop的文件进行字数统计,但得到以下错误
$ hadoop jar /home/hadoop/share/hadoop/mapreduce
at org.apache.hadoop.mapreduce.Cluster.initialize(Cluster.java:120) at org.apache.hadoop.mapreduce.Cluster.<init>(Cluster.java:75)
at org.apache.hadoop
我使用的是Hadoop2.9.1独立的文件夹(我使用的文件夹是在成功编译源代码之后),每当我运行Hadoop命令(其中$HADOOP_HOME= /usr/local/hadoop是Hadoop的目录)$HADOOP_HOME/bin/hadoop jar $HADOOP_HOME/share/hadoo