我一直在尝试安装Accumulo,并尝试了几天,但在开始之前它就被占用了。我最终使用的是安装了HortonWorks和Zookeeper的Hadoop。我按照Accmulo设置页面上的说明更改了配置,如下所示:
[root@sandbox ~]# vi /etc/accumulo/conf/accumulo-env.sh
if [ -z "$ACCUMULO_HOME" ]
then
test -z "$ACCUMULO_HOME" && export ACCUMULO_HOME=/usr/hdp/2.2.0.0-2041/accumul
我正在尝试运行示例pi map-red示例代码。在伪分布式模式下运行时,会发生以下错误。我已经按照hadoop站点中的说明完成了所有设置。我已经安装了ssh,并正确设置了配置文件。
hadoop_admin@ubuntu:~/hadoop-1.0.4$ sudo bin/hadoop jar hadoop-examples-1.0.4.jar pi 10 10
Number of Maps = 10
Samples per Map = 10
13/02/13 14:47:34 INFO ipc.Client: Retrying connect to server: localhost/127
我在hadoop集群上运行我的windows机器上的word计数程序,该集群是在远程linux机器上设置的。程序正在成功运行,我得到了输出,但是我得到了下面的异常,并且我的waitForCompletion( true )没有返回true。
java.io.IOException: java.net.ConnectException: Your endpoint configuration is wrong; For more details see: http://wiki.apache.org/hadoop/UnsetHostnameOrPort
at org.apache.ha
我在重新启动纱线服务时遇到问题。它总是失败,错误显示在下面的日志中。直到上周,YARN一直运行良好,然后突然弹出下面的错误消息。
已尝试重新启动YARN/作业历史服务器。什么都不管用。请帮助缓解这个问题。
谢谢,维诺斯
Error starting JobHistoryServer
java.lang.IllegalAccessError: tried to access class org.apache.hadoop.mapred.JobACLsManager from class org.apache.hadoop.mapreduce.v2.hs.HistoryFileManager
我正在尝试在Hadoop中运行一个java类,就像"Hadoop.The.Definitive.Guide“一书中的那样,如下所示:
hadoop URLCat hdfs://localhost/user/hamza/sometext.txt
在那里它应该将sometext.txt的内容打印到终端。当我键入该命令时,会出现以下错误:
Error: Could not find or load main class URLCat
URLCat是一个Java类,但是我不知道为什么它不能工作。我尝试使用IntelliJ将其转换为jar文件,但是当我运行它时,如下所示:
hadoop jar
我在debian上安装了hadoop,它工作得很好。(不是在VM中)然后我重新启动了计算机,它开始显示问题。我得到了一个错误-
hadoop fs -ls /user/hduser
返回的错误如下-
16/06/15 10:48:34 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
ls: Call From localhost/127.0.0.1 to mylocalcomp:900
我已经在ubuntu 14上安装了hadoop。
但不是我第一次安装hadoop。
问题是: datanode没有启动。这是datanode.log的日志:
2014-06-22 18:51:34,438 INFO org.apache.hadoop.metrics2.impl.MetricsSystemImpl: DataNode metrics system started
2014-06-22 18:51:35,640 INFO org.apache.hadoop.metrics2.impl.MetricsSourceAdapter: MBean for source ugi regi
我正在尝试在几台机器上设置hadoop集群,其中Hadoop Directory位于共享磁盘上。HDFS运行良好。但是当我尝试启动YARN时,ResourceTracker抛出了一个BindException。配置为运行ResourceTracker的节点(ahti.d.umn.edu-131.212.41.9)是可到达的(我可以通过SSH连接到它),端口(28025)也是开放的。
org.apache.hadoop.yarn.server.resourcemanager.ResourceTrackerService failed in state STARTED; cause: org.ap
成功启动aws EMR集群,但任何提交都失败:
19/07/30 08:37:42 ERROR UserData: Error encountered while try to get user data
java.io.IOException: File '/var/aws/emr/userData.json' cannot be read
at com.amazon.ws.emr.hadoop.fs.shaded.org.apache.commons.io.FileUtils.openInputStream(FileUtils.java:296)
at co