我正在尝试使用Cent OS6机器在Rackspace云上安装Hadoop集群。在从cloudera管理器创建新集群的过程中,我得到了以下错误。有人能帮上忙吗。
集群安装
安装选定的地块正在下载选定的地块,并将其安装在集群中的所有主机上。
CDH 5.3.2-1.cdh5.3.2.p0.10 3错误
Error when distributing to vm-cdh-cluster-3 : [Errno socket error] [Errno -2] Name or service not known.
Error when distributing to vm-cdh-cluster-1
我们用三个节点建立了hadoop集群。启动群集时,会收到如下错误消息:
ssh: Could not resolve hostname master:
但在我们的应用程序中,在吐露中没有使用这个名称。但是守护进程都在主从中运行。但是在检查UI时,只有一个节点是活动节点。有人能帮我找到这些conf文件。
我正在使用Cloudera设置我的hadoop集群。我已经启动并运行了HBASE,但是当我导航到hbase web UI时,我看到一些区域服务器URL是扭曲的。对于某些主机,DNS似乎无法正确解析。但是,当我执行nslookup或dig时,所有主机的结果都是相同的,但其中一些不能正确显示。有人知道这是怎么回事吗?
我在kubernetes中运行了hadoop集群,包含4个日志节点和2个namenodes。有时,我的数据不能注册到namenodes。
17/06/08 07:45:32 INFO datanode.DataNode: Block pool BP-541956668-10.100.81.42-1496827795971 (Datanode Uuid null) service to hadoop-namenode-0.myhadoopcluster/10.100.81.42:8020 beginning handshake with NN
17/06/08 07:45:32 ERROR da
我已经在mac上安装了hbase视图brew。从上次启动hbase集群到现在已经有一段时间了:可以预见的是,动物园管理员无法工作。
2014-12-02 18:56:40,250 DEBUG [main-EventThread] master.ActiveMasterManager: A master is now available
2014-12-02 18:56:40,250 WARN [M:0;192.168.255.170:51072] hbase.ZNodeClearer: Environment variable HBASE_ZNODE_FILE not set; znodes
我对在hadoop中有争议。有人知道怎么解决我的问题吗?
[hduser@evghost ~]$ start-dfs.sh
Starting namenodes on [evghost]
Error: Please specify one of --hosts or --hostnames options and not both.
evghost: starting datanode, logging to /usr/lib/hadoop-2.7.1/logs/hadoop-hduser-datanode-evghost.out
Starting secondary namenodes [
我试图在HBase中运行作业。我使用${HADOOP_HOME}/bin/hadoop jar ${HBASE_HOME}/lib/hbase-server-VERSION.jar rowcounter usertable来运行作业。
在运行的时候,我得到了以下异常
Exception in thread "main" java.lang.reflect.InvocationTargetException
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.r
我有一个mapreduce应用程序,它接受一个HBase源数据,并将其映射为另一个HBase表,所有这些都是用Java.When编写的,我使用
hadoop jar myhbase.jar
它以NullpointerException结尾,如下所示:
14/01/31 11:07:02 INFO zookeeper.ClientCnxn: Socket connection established to 127.0.0.1/127.0.0.1:2181, initiating session
14/01/31 11:07:02 INFO zookeeper.ClientCnxn: Sessi
我有一个使用内部网络的Hadoop集群(ip范围为192.168.0.0/24),我希望使用java库(org.apache.hadoop.hbase.client)从使用不同网络的开发计算机(ip是外部网络203.252.x.x)连接hbase,但我无法连接hbase。
我有个问题。
我的代码错了吗?
是否可以使用Java (org.apache.hadoop.hbase.client),我应该使用节约协议吗?(我不想用这个词)
你有什么想法吗?或者评论?
谢谢
这是我连接Hbase的代码。
public class TestBase {
public stat
我正在努力建立一个包含2个节点的Hbase分布式集群,一个是我的机器,另一个是VM,使用VirtualBox中的“仅主机”适配器。
我的问题是区域服务器(来自虚拟机)无法连接到主机上运行的Hbase主服务器。虽然在Hbase shell中,我可以在虚拟机(‘从’)上的regionserver中列出、创建表...,但日志始终显示
org.apache.hadoop.hbase.regionserver.HRegionServer: Unable to connect to master. Retrying. Error was:
java.net.ConnectException: C
我在Ubuntu15.04上安装了Hadoop2.7.0单节点集群,遵循来自的命令,直到命令格式化hdfs为止,几乎一切正常。
当我进入
$ hdfs namenode -format
我收到错误:Could not find or load main class Djava.librarary.path=.usr.local.hadoop.lib
在巴斯克我有
#hadoop variables
export JAVA_HOME=/usr/lib/jvm/java-8-oracle/lib/amd64
export HADOOP_HOME=/usr/local/hadoop
export P