腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(6755)
视频
沙龙
1
回答
hadoop
从
节点
能否
成为
hadoop
主
节点
而
不会
导致
数据
丢失
hadoop
我有三个
节点
的
hadoop
集群。A B C A
主
服务器 B
从
站 C
从
站 如果我想让C作为主服务器,其余的作为
从
服务器,我会面临
数据
丢失
或
数据
损坏吗?
浏览 15
提问于2019-06-20
得票数 0
1
回答
怎么把你的名字记下来?
hadoop
如何在CentOs上下载
Hadoop
1.2.1中的Namenode,并将namenode与Datanode实例交换,我还必须确保在此过程中
不会
丢失
任何
数据
。我使用
Hadoop
1.2.1与
主
节点
、
从
节点
1和
从
节点
2
节点
。如有需要,请询问任何具体细节!
浏览 2
提问于2015-07-23
得票数 0
回答已采纳
2
回答
Hadoop
纱:如何迫使
节点
标记为“
丢失
”
而
不是“关机”?
hadoop
、
hadoop-yarn
、
amazon-emr
我正在对
节点
丢失
时发生的纱线应用程序故障进行故障排除,因此我尝试重新创建此场景。但我只能强迫
节点
关闭
而
不是
丢失
。我正在使用AWS电子病历,我试过:这
浏览 5
提问于2021-02-10
得票数 6
回答已采纳
1
回答
删除
Hadoop
的一个
节点
,它也是NameNode
hadoop
为了有更多的“工人”,我将Nademode添加到/etc/
hadoop
/奴隶中的奴隶列表中。 这是可行的,主人完成了一些mapReduce作业。今天,我想从workers列表中删除这个
节点
(这对它来说CPU太密集了)。我想在我的hdfs-site.xml中设置dfs.exclude,但我担心这也是
主
服务器。
浏览 5
提问于2014-10-14
得票数 0
回答已采纳
3
回答
Hadoop
namenode :单点失效
hadoop
、
mapreduce
、
hdfs
、
hadoop-yarn
、
hadoop2
Hadoop
架构中的Namenode是一个单一的失败点。是否有一个业界接受的解决方案工作良好,其中第二个Namenode接管,以防止主要的失败?
浏览 7
提问于2010-12-21
得票数 25
回答已采纳
2
回答
Hadoop
错误: INFO ipc.Client:重新尝试连接到服务器: localhost
hadoop
、
localhost
、
cluster-computing
我已经成功地建立了一个有6个
节点
的
Hadoop
集群(master,salve<1-5>) tcp 50030 0.0.0.0:50030 0.0.0.0:*侦听1000 93550 11852/java 它的
主
IP绑定到端口54310和
浏览 0
提问于2012-11-08
得票数 7
回答已采纳
1
回答
错误: org.apache.
hadoop
.hbase.MasterNotRunningException: null
hadoop
、
hbase
我试图在EC2上一个新的Hbase集群上运行Hbase Shell (1个
主
节点
和8个
从
节点
)730 JobTracker26622 Jps ERROR: org.apache.
hadoop
.hbase.MasterNotRunningE
浏览 1
提问于2012-02-10
得票数 0
1
回答
如何
从
运行
Hadoop
集群中删除磁盘?
hadoop
、
hdfs
我安装了一个6 Node
Hadoop
集群,并安装了HDP 2.3。问题/dev&
浏览 0
提问于2016-03-18
得票数 0
1
回答
Hadoop
:
从
节点
没有启动
hadoop
我正试图在我的机器上设置一个伪分布式
Hadoop
集群。环境详细信息:主机操作系统::Ubuntu 我能够在单
节点
集群上成功地运行
hadoop
字数。但是,当我尝试添加
从
节点
时,datanode、jobtracker、namenode和备用namenode在Master中启动良好,但从
节点
中没有
数据
节点
启动。/etc/host文件包含两个vm中的正确条目
浏览 2
提问于2013-02-23
得票数 2
1
回答
如果在停机一段时间后重新启动,则hdfs datanode
不会
恢复本地磁盘空间
hadoop
、
hdfs
我正在使用
hadoop
2.9.0作为分布式文件存储系统进行POC,从而设置了一个多
节点
集群设置,其中包含1个namenode和4个
数据
节点
(包括
主
数据
),复制因子为2。然后,我使用hdfs dfs -rm -skipTrash命令清理了几个GB的
数据
,
而
slave2还在运行。后来,我重新启动了我已经停止的slave2
数据
节点
,它似乎没有清理在其停机期间
从
hdfs中删除的
数据
块。G
浏览 1
提问于2017-12-18
得票数 0
1
回答
Hadoop
:
从
节点
没有启动
hadoop
我正试图在我的机器上设置一个伪分布式
Hadoop
集群。环境详细信息:主机操作系统::Ubuntu我能够在单
节点
集群上成功地运行
hadoop
字数。但是,当我尝试添加
从
节点
时,datanode、jobtracker、namenode和备用namenode在Master中启动良好,但从
节点
中没有
数据
节点
启动。/etc/host文件包含两个vm中的正确条目 我使用
浏览 0
提问于2013-02-23
得票数 0
1
回答
数据
节点
故障后hdfs的恢复
hadoop
、
hdfs
我有一个4
节点
hadoop
集群,其中包含2个
主
节点
和2个
数据
节点
。我在这个集群里有很多文件。我的一个
数据
节点
崩溃了(意外地
从
aws控制台终止)。因为我有复制因子1,所以我假设这
不会
导致
任何
数据
丢失
。我添加了新
节点
,并将其作为
数据
节点
。但现在我的hdfs dfsadmin -report说了很多缺失的区块。这是为
浏览 0
提问于2018-06-11
得票数 0
回答已采纳
1
回答
namenode不例外
hadoop
、
hadoop2
我被困住了有人能在
hadoop
集群上帮忙吗? 我在AWS上运行一个小型集群(1
主
、1次和3
从
)。启动-所有启动的dfs结果,除了Slave3上的名称
节点
(如预期的1和2开始.)。大师上有一条奇怪的信息,但不知道是否相关(也不确定为什么与奴隶3有关,
而
不是2或1.)。注意由于缺少冗余存储目录
而
导致
的
数据
丢失
!org.apache.
hadoop
.hdfs.server.namenode.FSNamesystem:只配置了
浏览 3
提问于2016-01-20
得票数 0
回答已采纳
2
回答
使用EBS在Amazon服务上建立
Hadoop
集群
apache
、
amazon-web-services
、
hadoop
、
hdfs
、
impala
我想知道如何通过AWS设置
hadoop
集群(比如5个
节点
)。我知道如何在EC2上创建集群,但我不知道如何面对以下挑战。 任何帮助都会很棒的!
浏览 2
提问于2017-07-28
得票数 0
回答已采纳
1
回答
HDFS
数据
分发
hdfs
、
hadoop2
我对
Hadoop
很陌生,并开始学习它。关于HDFS
数据
的分发,我有一个问题。 我们最初将在哪里加载
数据
?关于Node大师?
Hadoop
是否在集群上自行分发
数据
?还是我们必须自己做?
浏览 2
提问于2017-05-11
得票数 0
1
回答
辅助名称
节点
功能
hadoop
、
hdfs
有人能解释一下
从
课本上摘取的黑体字到底是什么意思吗?“次级namenode的状态滞后于
主
节点
的状态”意味着什么? 辅助名称
节点
保存合并命名空间映像的副本,该副本可在namenode失败时使用。**但是,二级namenode的状态落后于
主
节点
的状态,因此,如果
主
节点
完全失败,
数据
丢失
几乎是肯定的。**在这种情况下,通常的操作是将NFS上的namenode元
数据
文件复制到次要
节点
,并将
浏览 3
提问于2015-07-18
得票数 2
回答已采纳
3
回答
hadoop
集群中的边缘
节点
hadoop
、
bigdata
有人能给我解释一下
hadoop
中Edge
节点
的架构吗?我只能在互联网上找到定义,我有以下问题- 1)边缘
节点
必须是集群的一部分吗(如果它在集群内,我们有什么优势?)它是否在hdfs中存储任何
数据
块。2)边缘
节点
可以在集群外吗?
浏览 5
提问于2013-05-22
得票数 12
5
回答
将远程文件放入
hadoop
,
而
不将其复制到本地磁盘
unix
、
ssh
、
hadoop
、
copying
、
piping
我正在编写一个shell脚本,以便在
数据
生成后立即将其放入
hadoop
中。我可以ssh到我的
主
节点
,将文件复制到那里的一个文件夹中,然后将它们放入
hadoop
。我正在寻找一个shell命令,以避免将文件复制到
主
节点
上的本地磁盘。为了更好地解释我需要什么,你可以在下面找到我到目前为止所拥有的:scp test.txt username@masternode:/folderName/
浏览 0
提问于2012-06-30
得票数 36
回答已采纳
2
回答
不使用cdh4 tarball安装的集群
hadoop
、
cloudera
我正在尝试使用tarball版本安装CDH4,但是在我所采取的步骤中所面临的问题如下:hdfs-site.xmlmasters --- which is my namenode在集群中的所有
节点
上复制所以在这种情况下,我从命令开始 bin/start-mapred
浏览 1
提问于2013-03-24
得票数 0
4
回答
无法
从
名称
节点
(
主
)启动群集:
数据
节点
(
从
)和名称
节点
(
主
)上的$
HADOOP
_HOME不同
hadoop
、
hadoop2
我在
主
服务器和
从
服务器上使用
Hadoop
1.2.1,但我将它们安装在不同的目录下。因此,当我在master上调用bin/start-dfs.sh时,我得到以下错误。: bash: **/home/partho/
hadoop
/apache/
hadoop
-1.2.1/bin/
hadoop
-daemon.sh: No such file or directory** partho/logs/<
浏览 0
提问于2015-01-11
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
怎样用Hadoop保护大数据?
Uber容器化Apache Hadoop基础设施的实践
Hadoop HDFS DataNode 存储机制
Hadoop集群搭建和简单应用
大数据 HDFS NameNode 高可用实现原理
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券