腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
将
Hadoop
配置
为多
节点
集群
hadoop
我在VMware上的centos上安装了
Hadoop
2.4.1。我应该将
Hadoop
集群
配置
为多
节点
cluster.First,我不知道
如何
在
Hadoop
‘
集群
上构建多个
节点
。其次,我应该
如何
配置
Hadoop
集群
上的
节点
?请一步一步地详细地指导我,特别是在定义
节点
方面。
浏览 3
提问于2014-12-06
得票数 2
3
回答
hadoop
集群
中的边缘
节点
hadoop
、
bigdata
有人能给我解释一下
hadoop
中Edge
节点
的架构吗?我只能在互联网上找到定义,我有以下问题- 1)边缘
节点
必须是
集群
的一部分吗(如果它在
集群
内,我们有什么优势?)它是否在hdfs中存储任何数据块。2)边缘
节点
可以在
集群
外吗?
浏览 5
提问于2013-05-22
得票数 12
3
回答
Hadoop
客户端
节点
配置
hadoop
假设有一个拥有20台机器的
Hadoop
集群
。在这20台机器中,有18台机器是从机,19台机器用于NameNode,20台机器用于JobTracker。现在我知道
hadoop
软件必须安装在所有这20台机器上。 但我的问题是,将文件xyz.txt加载到
Hadoop
Cluster涉及到哪台机器。客户端机器是否是一台独立机器。我们需要在那台clinet机器上安装
Hadoop
软件吗?客户端机器
如何
识别
Hadoop
集群
?
浏览 1
提问于2014-03-07
得票数 14
1
回答
在
Hadoop
集群
中为MapReduce作业部署JAR
hadoop
我在CentOS linux中有一个5
节点
hadoop
集群
。我写了一张地图,还原并编译了这个罐子。我需要将JAR部署到哪个
节点
? 提前谢谢。
浏览 7
提问于2015-06-15
得票数 2
1
回答
GCE上的
Hadoop
实例
hadoop
、
google-compute-engine
、
cluster-computing
、
google-cloud-dataproc
我正在引擎上建立一个
Hadoop
集群
。但我很难理解
集群
实例将
如何
工作。我已经找了很多东西,但没有给出明确的答案。在设置
Hadoop
集群
时,是否创建一个安装了
Hadoop
的实例的映像,并且每次启动此实例(映像)时都创建其他实例(
节点
)? 但是,这种方法需要每次创建
节点
时都必须
配置
节点
?有没有人有这方面的经验,并能提供一些文档,关于
如何
在Google引擎上设置
Hadoop</e
浏览 3
提问于2014-04-28
得票数 1
回答已采纳
1
回答
如何
在windows上安装
hadoop
2.4.1
windows-7
、
cluster
、
hadoop
、
hdfs
、
apache-spark
我想在纱线模式下使用
hadoop
设置一个
集群
。我想使用spark进行映射-减少,并使用submit来部署我的应用程序。我想在cluster..can上工作,任何人都可以帮助我使用windows在
集群
中安装
HADOOP
。
浏览 0
提问于2017-03-13
得票数 0
1
回答
Hadoop
2.x多
节点
群集安装
hadoop
、
cluster-computing
、
hadoop-yarn
我是
hadoop
的新手。我在网上找到了一些关于安装
Hadoop
2.x多
节点
集群
的链接。我的疑问是,在所有
节点
上安装JVM、创建相同的用户名、ssh
配置
、在所有
节点
上进行
配置
之后,
如何
将客户机连接或
配置
到
集群
,以便将数据从本地复制到hdfs?
浏览 1
提问于2016-02-07
得票数 0
1
回答
HADOOP
: java.io.IOException
hadoop
property> <value>1</value></configuration> 上面是我的hdfs-site.xml
配置
浏览 7
提问于2020-08-19
得票数 0
1
回答
将Flowfile文件传递给FetchHdfs处理器
apache-nifi
下面的图片是我的要求,路径和host_ip将出现在flowfile属性中,如果fetchHDFS不是正确的方式,我
如何
实现这一点。
浏览 0
提问于2021-11-26
得票数 0
1
回答
Hadoop
集群
和客户端连接
hadoop
、
hive
、
client
、
apache-pig
、
cluster-computing
我有
hadoop
集群
。现在我想把猪和蜂箱作为客户端安装在另一台机器上。客户端机器不会是该
集群
的一部分,所以有可能吗?如果可能的话,我是
如何
将客户机与
集群
连接起来的呢?
浏览 1
提问于2016-11-10
得票数 2
回答已采纳
1
回答
如何
在多
节点
Hadoop
集群
上建立星点?
hadoop
、
apache-spark
、
hdfs
我想在多
节点
集群
上安装
Hadoop
和Spark。我怀疑我是否也要在奴隶中
配置
火花?
浏览 0
提问于2017-05-19
得票数 1
回答已采纳
1
回答
Amazon Cloud上的
Hadoop
amazon-ec2
、
hadoop
、
mapreduce
、
amazon
、
amazon-ami
我正在尝试在Amazon Cloud上设置运行一些
hadoop
MapReduce作业,但我正在努力成功地创建一个
集群
。我已经下载了ec2文件,有我的证书和密钥对文件,但我相信是AMI给我带来了麻烦。如果我试图运行一个包含一个主
节点
和n个从
节点
的
集群
,我会使用标准兼容的AMI启动n+1实例,然后在终端中运行代码"
hadoop
-ec2 start cluster name n“。主
节点
是成功的,但是当从
节点
开始启动时,我收到一个错误,显示&qu
浏览 2
提问于2011-11-08
得票数 0
回答已采纳
2
回答
HDFS中的哪个
节点
请求数据?
hdfs
我正在构建一个HDFS
集群
,我想请求数据。我是否必须将所有请求都发送到主
节点
,还是可以通过任何
节点
发送? 谢谢
浏览 2
提问于2017-04-12
得票数 0
1
回答
我可以从我的Axis2 Web服务调用
Hadoop
吗?
java
、
web-services
、
hadoop
我打算开发一个web服务,它可以与
Hadoop
主
节点
对话,执行一些任务。这些任务包括: 1.启动和停止
hadoop
集群
2.从
hadoop
集群
3中添加和删除从
节点
。但是请告诉我
如何
从我的web服务中调用
Hadoop
。包括在类路径中的
Hadoop
罐子够了吗?我想我也需要一些
配置
。请指导我在web服务和
Hadoop
集群
之间建立一个简单的调用流程。
浏览 0
提问于2011-02-26
得票数 0
4
回答
火花对纱线概念的认识
hadoop
、
apache-spark
、
hdfs
、
hadoop-yarn
我正试图了解星火
如何
在纱线
集群
/客户端上运行。我脑子里有一个问题。 是否有必要在纱线簇的所有
节点
上安装火花?我认为应该是因为
集群
中的工作
节点
执行一个任务,并且应该能够解码由驱动程序发送到
集群
中的代码(火花API)?它在文档中写道,“确保
HADOOP
_CONF_DIR或YARN_CONF_DIR指向包含
Hadoop
集群
(客户端)
配置
文件的目录”。为什么客户端
节点
在将作业发送到
集群
浏览 3
提问于2014-07-23
得票数 42
回答已采纳
1
回答
如何
将
节点
添加到伪分布式
hadoop
设置中?
hadoop
、
cluster-computing
在网络上添加另一台计算机/
节点
(cygwin)以形成
hadoop
的最低步骤是什么
浏览 0
提问于2011-08-10
得票数 0
回答已采纳
2
回答
Spark 1.5.2和
Hadoop
2.4 (Hive 2)版本兼容性
hadoop
、
apache-spark
、
hive
、
version
我是新的使用火花与
Hadoop
。我已经使用预构建的二进制"spark-1.5.2-bin-
hadoop
2.6“在4个
节点
集群
上
配置
了Spark。在我的环境中还有一个
Hadoop
2.4
集群
,其中有4个
节点
。我计划对
Hadoop
集群
中hdfs中的数据使用Hive HQL使用Spark处理。查询 我需要重新
配置
星火
集群
使用“火花-1.5.2-bi
浏览 4
提问于2015-11-24
得票数 0
回答已采纳
1
回答
是否可以在
hadoop
程序运行应用程序时自动添加
节点
hadoop
我是初级程序员和
hadoop
学习者。在启动maptask和hdfs之前,我正在使用5台PC(具有双核cpu和ram 2G)测试
hadoop
全分发模式,我知道必须
配置
文件( Ip上的etc/hosts、主机名和
hadoop
文件夹/conf/master、从文件),所以我完成了该文件的
配置
在我公司的研讨会上辩论时,我的老板和首席执行官坚持认为,即使
hadoop
应用程序处于运行状态,如果
hadoop
需要更多的
节点
或
集群
浏览 1
提问于2013-03-11
得票数 2
1
回答
无盘计算
节点
的
hadoop
(HDFS)
hadoop
、
share
、
hdfs
我有一个小型
集群
,其中一个
节点
具有RAID存储,几个功能强大的无盘计算
节点
通过PXE引导。所有
节点
都通过InfiniBand (和1G以太网进行引导)连接。 我需要在这个
集群
上部署
Hadoop
。请建议最佳
配置
,因为我理解默认
配置
意味着所有计算
节点
都具有自小存储,但在我的情况下(如果我有NFS共享),它将通过网络复制太多。我已经找到了有关使用
Hadoop
和Lustre的资源,但是我不知道
如何
配
浏览 3
提问于2015-03-10
得票数 1
回答已采纳
2
回答
Hadoop
客户端与
集群
分离
hadoop
、
cluster-computing
、
vpn
、
hadoop2
我也是
hadoop
,linux的新手。我的教授要求我们使用端口映射或VPN分离
Hadoop
客户端和
集群
。我不明白这种分离的含义。有人能给我个提示吗?我有一些天真的想法:3.
浏览 1
提问于2016-02-10
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop集群配置
如何给Hadoop集群划分角色
新手如何快速搭建Hadoop集群
如何使用Mahout在hadoop进行集群分析
如何操作DOM之“新增”节点
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券