腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(6038)
视频
沙龙
3
回答
hadoop
集群
中的边缘
节点
、
有人能给我解释一下
hadoop
中Edge
节点
的架构吗?我只能在互联网上找到定义,我有以下问题- 1)边缘
节点
必须是
集群
的一部分吗(如果它在
集群
内,我们有什么优势?)它是否在hdfs中存储任何数据块。2)边缘
节点
可以在
集群
外吗?
浏览 5
提问于2013-05-22
得票数 12
1
回答
如何在apache
hadoop
2.7.1上安装cloudera
、
、
我目前正在使用apache
hadoop
2.7.1,
集群
包括1个名称
节点
和3个数据
节点
。提前谢谢。
浏览 4
提问于2016-02-07
得票数 1
1
回答
在
hadoop
集群
中添加
节点
而不重新启动主服务器
、
、
我已经创建了
hadoop
集群
,并希望在
集群
中添加一个新
节点
,作为从
节点
运行,而不重新启动主
节点
。 这
怎么
能办到
浏览 3
提问于2022-05-05
得票数 0
1
回答
1个
Hadoop
和Hbase大簇与1个
Hadoop
簇+1个Hbase簇
、
Hadoop
将通过从Hbase读取数据并将数据写入Hbase来运行许多作业。假设我有100个
节点
,那么有两种方法可以构建
Hadoop
/Hbase
集群
: 分离数据库(),然后我们有两个
集群
:60
节点
Hadoop
集群
和40
节点
Hbase
集群
浏览 4
提问于2014-04-19
得票数 1
回答已采纳
1
回答
如何将文件从HDFS复制到远程HDFS
、
我希望将文件从
Hadoop
集群
复制到远程
集群
。我知道远程名称
节点
的IP和端口。
hadoop
-cp hdfs://MyNamespace/path/file hdfs://RemoteNamespace/path/file 但是,如果不配置
hadoop</em
浏览 1
提问于2018-04-20
得票数 0
回答已采纳
1
回答
ubuntu上
Hadoop
-1.2.0单
节点
集群
的include文件在哪里?
我正在尝试在我的
Hadoop
-1.2.0单
节点
集群
上设置包含文件,这样除了包含文件中的内容之外,其他
节点
都不能与namenode通信。我不知道该
怎么
做 我已经设置了一个单
节点
集群
,并且目前是
Hadoop
的新手。我安装了一个openssh-server,并设置了namenode目录,您可以在这里查看我的。
浏览 13
提问于2016-08-23
得票数 0
1
回答
当次Namenode失败时,对
hadoop
集群
的影响是什么?
当Secondary NameNode失败时,
hadoop
集群
会发生什么。
Hadoop
集群
被认为是单点故障,因为所有的medata都是由NameNode存储的。如果次要名称
节点
失败,群集将失败或继续运行,那么辅助NameNode
怎么
办?
浏览 0
提问于2014-01-15
得票数 1
回答已采纳
3
回答
Hadoop
客户端
节点
配置
假设有一个拥有20台机器的
Hadoop
集群
。在这20台机器中,有18台机器是从机,19台机器用于NameNode,20台机器用于JobTracker。现在我知道
hadoop
软件必须安装在所有这20台机器上。 但我的问题是,将文件xyz.txt加载到
Hadoop
Cluster涉及到哪台机器。客户端机器是否是一台独立机器。我们需要在那台clinet机器上安装
Hadoop
软件吗?客户端机器如何识别
Hadoop
集群
?
浏览 1
提问于2014-03-07
得票数 14
8
回答
为什么
Hadoop
报告“不健康的
节点
本地污染和日志污染是不好的”?
、
我正试图在我的PC上设置一个单
节点
Hadoop
2.6.0
集群
。1/1 local-dirs are bad: /tmp/
hadoop
-hduser/nm-local-dir; <em
浏览 7
提问于2015-03-18
得票数 38
回答已采纳
2
回答
动物园管理员和卡夫卡在
Hadoop
2.6
集群
中的位置
、
、
Hadoop
2.6使用Yarn作为下一代地图减少,同时也是
集群
管理器。对于
集群
管理服务,我们还需要使用
Hadoop
2.6中的ZooKeep2.6吗?我们
怎么
设置动物园管理员。如何为
hadoop
集群
安装Kafka连接。什么是卡夫卡的消费者和生产者将数据发送到
hadoop
文件系统。我已经设置了
Hadoop
2.6单
节点
集群
。接下来,我理解的方法是让动物园管理员和Kafka负责数据流到<e
浏览 2
提问于2015-07-27
得票数 4
回答已采纳
1
回答
将
Hadoop
配置为多
节点
集群
我在VMware上的centos上安装了
Hadoop
2.4.1。我应该将
Hadoop
集群
配置为多
节点
cluster.First,我不知道如何在
Hadoop
‘
集群
上构建多个
节点
。其次,我应该如何配置
Hadoop
集群
上的
节点
?请一步一步地详细地指导我,特别是在定义
节点
方面。
浏览 3
提问于2014-12-06
得票数 2
2
回答
Cascalog能否链接到外部
Hadoop
集群
?
、
看起来对
hadoop
的依赖是在项目的project.clj文件中提供的,如下所示如果我必须包含对本地安装的
Hadoop
单
节点
集群
或一些外部
hadoop
集群
的依赖关系,我应该
怎么
做?如果它是本地的,我是否应该简单地将“
hadoop
的路径”放
浏览 0
提问于2013-09-23
得票数 0
1
回答
Amazon Cloud上的
Hadoop
、
、
、
、
我正在尝试在Amazon Cloud上设置运行一些
hadoop
MapReduce作业,但我正在努力成功地创建一个
集群
。我已经下载了ec2文件,有我的证书和密钥对文件,但我相信是AMI给我带来了麻烦。如果我试图运行一个包含一个主
节点
和n个从
节点
的
集群
,我会使用标准兼容的AMI启动n+1实例,然后在终端中运行代码"
hadoop
-ec2 start cluster name n“。主
节点
是成功的,但是当从
节点
开始启动时,我收到一个错误,显示&qu
浏览 2
提问于2011-11-08
得票数 0
回答已采纳
1
回答
多项式上的
Hadoop
融合
我需要使用
hadoop
在多
节点
集群
上挂载HDFS。我怎样才能做到这一点? 我已经成功地在单
节点
集群
上部署了fuse,但我怀疑它能否在多
节点
上工作。有人能把这件事弄清楚吗?
浏览 3
提问于2014-03-18
得票数 0
回答已采纳
2
回答
在
hadoop
集群
中,是否应该在所有
节点
上都安装hive?安装Pig
、
我是
Hadoop
/ Pig的新手,我刚刚开始阅读文档。我知道Pig运行在
Hadoop
之上。 我的问题是:
Hadoop
安装在所有
集群
节点
上。我是应该在所有
集群
节点
上也安装Pig,还是只在主
节点
上安装Pig?
浏览 3
提问于2018-06-11
得票数 0
2
回答
HDFS中的哪个
节点
请求数据?
我正在构建一个HDFS
集群
,我想请求数据。我是否必须将所有请求都发送到主
节点
,还是可以通过任何
节点
发送? 谢谢
浏览 2
提问于2017-04-12
得票数 0
1
回答
Hadoop
集群
和客户端连接
、
、
、
、
我有
hadoop
集群
。现在我想把猪和蜂箱作为客户端安装在另一台机器上。客户端机器不会是该
集群
的一部分,所以有可能吗?如果可能的话,我是如何将客户机与
集群
连接起来的呢?
浏览 1
提问于2016-11-10
得票数 2
回答已采纳
1
回答
使用Collectl监控
Hadoop
集群
、
、
我正在评估各种系统监控工具,以便使用其中一个来监控我的
hadoop
集群
。其中一个给我留下深刻印象的工具是collectl。我已经玩了几天了。比方说,我的
hadoop
集群
中有10个
节点
,每个
节点
都将collectl作为服务运行。使用colmux,我可以在单个视图中查看每个
节点
的性能指标(单行和多行格式)。太棒了!但是,如果我正在考虑
集群
中所有
节点
上的CPU、IO等的聚合,该
怎么
办?也就是说,我希望通过将每个
节点
浏览 3
提问于2015-06-19
得票数 0
1
回答
Ganglia无法与Apache HBase通信。
、
、
、
我安装了Ganglia来监视HBase
集群
。我在用ganglia-3.3.0。
Hadoop
版本:
hadoop
-1.1.2 我更改了hbase/conf/
hadoop
-metrics.properties文件。hbase.class=org.apache.
浏览 1
提问于2015-02-16
得票数 1
回答已采纳
1
回答
Hadoop
Yarn写入本地文件系统
、
、
、
我有一个使用
Hadoop
处理1000个小文件的场景。然后,
Hadoop
作业的输出将用作非
Hadoop
算法的输入。然而,非
Hadoop
算法无法理解序列文件。因此,我编写了另一个简单的
Hadoop
作业,用于从Sequence File读取结果文件的数据,并创建可供非
Hadoop
算法使用的最终小文件。这里的问题是,对于最后一个作业,我必须从HDFS读取Sequence Files,并将其写入要由非
Hadoop
算法处理的每个
节点
的本地文件系统。我已经尝试将输出
浏览 20
提问于2017-08-21
得票数 2
点击加载更多
相关
资讯
Hadoop集群配置
Hadoop集群PoC方案
Hadoop2.7.0 集群安装部署
如何给Hadoop集群划分角色
新手如何快速搭建Hadoop集群
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
云直播
活动推荐
运营活动
广告
关闭
领券