1回答
在分布式模式(hadoop cluster 1.x版本)上配置Hbase，zookeeper是强制的吗？
hbase、apache-zookeeper
我只有2个节点集群(分布式的)有hadoop 1.2.0。我想在上面配置hbase(0.94.10)。是否必须为此配置配置zookeeper --用于分布式模式？我听说，即使在分布式模式下，Hadoop1.x版本也不强制使用Zk来配置hbase。是真的吗？
浏览 1提问于2014-02-07得票数 0
1回答
如何在windows上安装hadoop2.4.1
windows-7、cluster、hadoop、hdfs、apache-spark
我想在纱线模式下使用hadoop设置一个集群。我想使用spark进行映射-减少，并使用submit来部署我的应用程序。我想在cluster..can上工作，任何人都可以帮助我使用windows在集群中安装HADOOP。
浏览 0提问于2017-03-13得票数 0
1回答
Hadoop 2.x多节点群集安装
hadoop、cluster-computing、hadoop-yarn
我是hadoop的新手。我在网上找到了一些关于安装Hadoop2.x多节点集群的链接。我的疑问是，在所有节点上安装JVM、创建相同的用户名、ssh配置、在所有节点上进行配置之后，如何将客户机连接或配置到集群，以便将数据从本地复制到hdfs？
浏览 1提问于2016-02-07得票数 0
2回答
hadoop是怎么工作的？客户端如何连接到hadoop
java、apache、hadoop、hdfs
我对hadoop有基本的理解。我的问题是客户机/开发人员如何连接到hadoop集群来执行查询。
例如，我是hadoop开发人员。某个远程位置的Hadoop集群。如何连接到hadoop集群来运行我的java代码？我是否也必须在我的笔记本电脑中安装hadoop (为此我必须运行Linux)？或者，如果我与Hadoop集群在同一个网络中，只需
浏览 4提问于2014-11-07得票数 1
回答已采纳
1回答
Hadoop客户端节点安装
hadoop
我有12个节点集群。它的硬件信息是：DataNode : CPU核心i3 2.7GHz问题:
客户端机器的安装过程。？如何在客户端机器上运行任何猪/蜂巢的脚本？
浏览 3提问于2016-07-22得票数 3
回答已采纳
1回答
Hadoop部署的用户
hadoop
我按照在线找到的说明在CentOS 8上安装和配置一个“2个名称节点”+“10个数据节点”hadoop集群。当我启动所有服务时，ssh到所有节点都显示“拒绝访问”。我应该使用哪个用户进行hadoop操作？
浏览 0提问于2020-01-28得票数 0
1回答
未在本地计算机上启动Hadoop独立模式存在权限问题
hadoop、ssh、permissions
hstartin 10 seconds.,keyboard-interactive). native-hadoop
浏览 84提问于2018-05-31得票数 0
1回答
Spring + Maven + Hadoop
java、spring、maven、hadoop
我在Spring + Maven + Hadoop环境中遇到了问题。我使用的是Apache Hadoop，但不要使用SpringSource提供的spring-hadoop。为了在java中使用hadoop，我在Maven中添加了以下依赖项。<dependency> <artifactId>hadoop-core<&#x
浏览 0提问于2013-02-05得票数 4
2回答
在openstack中安装Hadoop
hadoop、bigdata、openstack、hadoop2
我有一个关于hadoop安装的问题。目前我在VirtualBox上使用镜像，但我想在openstack上创建一个集群。起初，我认为我只需要在openstack上实例化一个hadoop镜像，或者安装几个实例并使用hadoop docker镜像。但是我找到了几个Sahara openstack的例子。知道我已经与多个人共享了openstack，是否可以在不经过openstack Sahara的情况下创建hadoop集群？或者不推荐这样做？
浏览 41提问于2019-03-11得票数 1
1回答
如何将文件从远程服务器复制到hdfs位置
shell、unix、hadoop、hdfs、sftp
请建议这是否可行，以及在这种情况下如何进行。另外，我想知道除了sftp之外，是否还有其他连接和复制的方法。
浏览 3提问于2014-09-04得票数 1
1回答
在机器集群上安装Hadoop的Fabric脚本？
hadoop、installation、hadoop-yarn
我开始在集群上安装hadoop。我可以通过ssh访问这些机器，并且我已经在它们上面安装了fabric。我想知道是否有人已经编写了一个fabfile来轻松地将hadoop安装和部署到集群中。我正在寻找一些东西，我可以只填写我机器的up地址，然后执行一组fab命令来启动集群。
浏览 1提问于2016-01-21得票数 1
1回答
Hadoop分布式模式
hadoop
这个问题可能看起来很琐碎，但我对Hadoop并不熟悉，目前被一个问题搞糊涂了。
启动守护进程时，如何在从节点上找到适当的文件？我知道您在适当的文件中指定了主程序和从节点，但是它如何知道该节点的文件系统上的位置(到Hadoop安装位置的路径)？我应该为此设置一些类似于HADOOP_HOME (或HADOOP_PREFIX)的东西吗？
浏览 0提问于2015-06-09得票数 0
回答已采纳
2回答
使用云外壳连接到hdfs的问题
hadoop、google-cloud-platform、hortonworks-data-platform、cloudera-cdh、google-cloud-dataproc
我发现使用google访问hadoop数据文件系统相当困难(，我在Google平台上创建了一个集群，只是为了学习)。通用的‘hdfs dfs -ls ’或‘hadoop fs -ls gs://’似乎不起作用，我一直在做一些尝试性的错误来研究如何解决。有人能帮我吗？谢谢:)
浏览 3提问于2019-09-30得票数 1
1回答
安装和配置多节点Hadoop集群
hadoop、installation、cluster-computing
我计划使用4台商品级个人电脑拥有自己的Hadoop集群。目前所有操作系统都运行Windows，但我可以在它们上安装Linux。我在互联网上搜索了很多安装过程，但都没有发现(发现很多人在AWS上旋转)。希望了解如何旋转这个裸金属Hadoop集群的详细步骤(至少是广泛的轮廓)。
浏览 3提问于2017-09-30得票数 1
回答已采纳
1回答
使用笔记本和桌面在ubuntu中创建Hadoop集群
13.10、hadoop
我在学Hadoop。我想以这样的方式安装Hadoop，使我的笔记本和台式机都在集群中。
我确实使用SSH连接了他们之间的连接。
浏览 0提问于2014-01-30得票数 0
1回答
mutli集群中hadoop连接的ssh密钥设置
hadoop、ssh
我知道hadoop操作应该需要ssh键连接。假设有五个集群，由一个namenode和四个数据节点组成。通过设置ssh键连接，我们可以从namenode连接到datanode，反之亦然。注意，hadoop操作应该需要双向连接，这意味着据我所知，只有一方(从namenode到datanode，而不是连接到从datanode到namenode)不可能操作hadoop。对于上面的场景，如果我们有50个节点或100个节点，那么通过连接机器并键入相同的命令ssh-keygen -t
浏览 5提问于2020-09-22得票数 0
回答已采纳
5回答
将远程文件放入hadoop，而不将其复制到本地磁盘
unix、ssh、hadoop、copying、piping
我正在编写一个shell脚本，以便在数据生成后立即将其放入hadoop中。我可以ssh到我的主节点，将文件复制到那里的一个文件夹中，然后将它们放入hadoop。为了更好地解释我需要什么，你可以在下面找到我到目前为止所拥有的：scp test.txt username@masternode:/folderName/ssh usern
浏览 0提问于2012-06-30得票数 36
回答已采纳
1回答
EMR群集上未安装火花
amazon-web-services、amazon-ec2、apache-spark、amazon-emr
我在EMR集群上使用Spark已经有几个星期了，没有问题--设置是使用AMI 3.8.0和Spark1.3.1，我将'-x‘作为一个参数传递给Spark (没有这个参数，它似乎没有安装)。我想升级到一个最新版本的星火，今天推出了一个带有EMR-4.1.0AMI的集群，其中包含了Spark1.5.0。当集群启动时，它声称已经成功地安装了Spark (至少在AWS上的集群管理页面上)，但是当我将ssh安装到'hadoop</em
浏览 3提问于2015-11-09得票数 0
回答已采纳
云服务器
ICP备案
对象存储
实时音视频
云点播
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号