1回答
我正在引擎上建立一个Hadoop集群。但我很难理解集群实例将如何工作。我已经找了很多东西，但没有给出明确的答案。在设置Hadoop集群时，是否创建一个安装了Hadoop的实例的映像，并且每次启动此实例(映像)时都创建其他实例(节点)？
但是，这种方法需要每次创建节点时都必须配置节点？有没有人有这方面的经验，并能提供一些文档，关于如何在Google引擎上设置Hadoop集群的一部分？
浏览 3提问于2014-04-28得票数 1
回答已采纳
2回答
我是Hadoop政府的新手:)
如何在NFS驱动器上备份整个集群？目前，我有一台独立的机器(不是集群的一部
浏览 4提问于2015-02-05得票数 1
Hadoop2.7安装在/opt/pro/hadoop/hadoop-2.7.3上的主服务器上，然后将整个安装复制到从服务器，但目录/opt/pro/hadoop-2.7.3不同。0: cd: /opt/pro/hadoop/hadoop-2.7.3: No such file or directory
slave: bash: /opt/pro/<
浏览 2提问于2017-02-18得票数 2
回答已采纳
我正在CentOS 6.4上安装Hadoop1.1.2。我读了http://hadoop.apache.org/docs/stable/上所有的Hadoop文档hadoop-create-user.shhadoop-setup-hdfs.sh
hadoop-se
浏览 0提问于2013-06-26得票数 2
1回答
我有一个很大的基于MapReduce 1的java项目，我想把它迁移到YARN上。这里有没有人知道怎么做的好指南？
浏览 0提问于2015-06-30得票数 0
从几个星期以来，我试图通过远程访问或连接到纱线集群的pyspark来提交python脚本。
我对HADOOP世界很陌生。我想要的是在外部HADOOP集群上的本地shell中提交火花脚本。我的情况:外部hadoop纱线集群。可以进入重要的港口。我有Windows 7 64位/Python2.7.9 64位/Spark1.4.1。HADOOP集群运行时没有任何问题。我的问题是:通过HADOOP
浏览 2提问于2015-08-21得票数 2
1回答
我正在旋转带有Spark2.4.6的AWS集群的emr-5.31.0图像，然后我尝试登录主节点上的星火外壳，并按照本教程从我的RDS MySQL实例上传数据。我已经将连接器jar (mysql-连接器-java-5.1.49-bin.jar)和脚本上传到~/home/hadoop文件夹。scala> :require /home/hadoop/mysql-connector-java-5.1.49-bin.jar
Added '/home/
浏览 13提问于2020-10-09得票数 0
回答已采纳
1回答
我想知道，当星体EC2创建集群时，是否可以更改hadoop版本？-s 1 launch my-spark-clusterspark-ec2 -k spark -i ~/.ssh/spark.pem login my-spark-cluster
并发现hadoop我想使用2.x版本的hadoop，最好的配置方法是什么？
浏览 3提问于2015-02-10得票数 9
回答已采纳
几个月来，我一直在使用使用Google脚本创建的Hadoop集群。每次启动机器时，我都必须使用以下命令手动启动Hadoop：cd /home/hadoop/hadoop-install/sbin除了脚本，我还能怎么解决这个问题呢？(集群创建后的第一次引导总是自动启动Hadoop，
浏览 0提问于2015-12-14得票数 0
2回答
有一个正在运行的Hadoop集群。我已经下载了Hadoop发行版(在本例中为0.20.205.0)exec ${HADOOP_HOME}/bin/hadoop com.cloudera.sqoop.Sqoop "$@"
如
浏览 3提问于2013-02-27得票数 1
Hadoop提供了在集群上直接运行java应用程序的可能性。现在我有了一个python脚本，而不是java应用程序。我是Python和Hadoop的新手。如果我的方法看起来完全不对劲，没有意义，我很高兴得到任何形式的澄清！
浏览 0提问于2017-10-25得票数 2
回答已采纳
"$common_bin/hadoop-layout.sh"
HADOOP_COMMON_LIB_JARS_DIR=${HADOOP_COMMON_LIB_JARS_DIR:-"share/hadoop/common/lib"}
浏览 6提问于2017-05-12得票数 0
回答已采纳
我正在尝试在hadoop集群中放置数据，我发现可以使用机架来完成。我想知道怎么做那些架子。有什么特别的方法吗?还是会自动完成？谁能帮助我如何在cluster.What中创建机架需要遵循的步骤。谢谢。
浏览 1提问于2015-04-09得票数 0
我已经安装了Hadoop2.x和nutch 1.x。谁能指导我如何将nutch网络爬行数据存储到hdfs中？比如提供关于该配置的任何文档或任何链接。谢谢你们所有人。
浏览 0提问于2018-04-25得票数 0
我正在尝试在我的ubuntu上安装hadoop，并按照页面上的安装指南进行安装，但在第一步就一直感到困惑： password: New passwd: 我知道这是我创建了一个新用户- hadoop。cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
$ ch
浏览 1提问于2018-04-08得票数 0
我正在编写代码来创建一个临时Hadoop集群。与大多数Hadoop集群不同，我需要日志、HDFS文件等的位置，以便在每次启动集群时都位于特定的临时网络位置。这个网络目录将在运行时生成；在我签入shell脚本(如hadoop-env.sh )和core-default.xml文件时，我不知道目录名。在签入时，：我可以修改hadoop-env.sh之类的shell脚本和core-default.xml这样的XML文件。
在运行时，：生
浏览 4提问于2014-03-11得票数 6
回答已采纳
我有一个4节点的Cassandra集群，它也是一个hadoop集群
当我运行pig脚本来选择和计算Cassandra表的行数时-它会创建具有1个map任务的hadoop作业-并且需要很长时间才能完成该作业为什么hadoop不创建多个地图作业？
浏览 1提问于2015-02-18得票数 0
我已经更改了hadoop存储其数据的路径(默认情况下，hadoop将数据存储在/tmp文件夹中)<property> <value>/HADOOP_CLUSTER_DATA/data</value>现在，每当我重新启动机器并尝试使用start-all.sh脚本</em
浏览 12提问于2013-11-22得票数 2
回答已采纳
我在namenode(master)和datanodes上都找不到任何这样做的启动和停止脚本。重启集群的方式应该是什么？
浏览 4提问于2015-08-25得票数 2
2回答
我有一个关于hadoop安装的问题。目前我在VirtualBox上使用镜像，但我想在openstack上创建一个集群。起初，我认为我只需要在openstack上实例化一个hadoop镜像，或者安装几个实例并使用hadoop docker镜像。但是我找到了几个Sahara openstack的例子。知道我已经与多个人共享了openstack，是否可以在不经过openstack Sahara的情况下创建hadoop集群？或者不推荐这样做？
浏览 41提问于2019-03-11得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
