我读到在Hadoop1.0HDFS中有名称节点、次要名称节点和数据节点。但是，如果次要名称节点会掉下来，它不会替换主名称节点，因为它会执行其他一些例程(比如存储信息到fsimage)。在Hadoop2.0中，它也是名称节点、次要名称节点和数据节点。在Hadoop2.0二级名称节点中，Node是否从较低的s开始，这只是替代名称Node，还是以fsimage存储信息？如果是，为什么Hadoop2.0保护不受单点故障问题的影响？
浏览 3提问于2020-04-28得票数 1
回答已采纳
我担心，为集群拥有一个主节点可能会引入一个单一的故障点。我希望我的集群在发生意外的主故障时具有(更多)的弹性。
是否可以配置我的cluster集群，从而使用某种形式的高可用性来降低单个主故障的风险？理想情况下，我还希望使用标准方法来实现纱线/Hadoop/HDFS的高可用性，这样就不需要定制软件(或必要的软件)。
浏览 3提问于2016-09-29得票数 0
回答已采纳
根据我到目前为止所读到的关于CAP定理的所有内容，没有一个分布式系统能够提供所有三个方面:可用性、一致性和分区容限。现在，Hadoop2.x引入了一个新特性，它可以配置为删除Hadoop集群所具有的单个故障点(单个namenode)。这样，集群就变得高可用性、一致性和分区容忍度。我说的对吗？还是我漏掉了什么？根据CAP，如果系统试图提供所有三个特性，它应该付出延迟的代价，新特性是否将延迟添加到集群中？或者Hadoop
浏览 3提问于2015-03-10得票数 4
回答已采纳
据我所知，Hadoop1.x有辅助namenode，但用于创建主namenode的映像，当主namenode失败并再次启动时，它会更新主namenode。但是，在Hadoop2.x中，考虑到我们已经有了一个热待机礼物，次级namenode的用途是什么呢？
浏览 0提问于2016-06-15得票数 0
回答已采纳
1回答
我已经在2个namenodes上设置了5个数据节点集群，这是在我的Hadoop2.6.0集群中为高可用性而配置的。我的Presto配置基于1个协调节点和3个工作节点.当我的星系团是一个单一的namenode集群时，我一直在用蜂巢转移来查询。但是现在，在为HA配置之后，我遇到了使用presto访问hdfs的问题，如下所示：
Query 20150320_120620_00004_vgrag failed: java.net.Unknow
浏览 0提问于2015-03-20得票数 2
回答已采纳
我的问题是，如果name节点自身失败了怎么办？谁将监视名称节点的活动状态(心跳)？
浏览 3提问于2013-03-27得票数 1
2回答
目前，当EMR集群主机停止(关机行为:停止而不是终止)时，我们会丢失集群，因为EMR的架构考虑到一旦主机关闭，集群就会终止。我们所处的世界中，硬件故障非常常见，将来EMR主机可能会出现故障，那么我们如何恢复存储在EMR集群上的数据呢？类似地，如果核心节点关闭并尝试硬重新启动(停止并启动)；终止核心节点，则配置的核心节点将启动以满足所需的核心容量，并且我们将丢失终止核心节点的所有数据(HDD) (数据损坏)。
浏览 4提问于2017-01-18得票数 1
iam在centos 7上使用hadoop 2.7.1如果活动名称节点失败，它就会成为备用。
但是webhdfs不支持高可用性，不是吗？
浏览 0提问于2017-04-06得票数 3
回答已采纳
3回答
Hadoop架构中的Namenode是一个单一的失败点。是否有一个业界接受的解决方案工作良好，其中第二个Namenode接管，以防止主要的失败？
浏览 7提问于2010-12-21得票数 25
回答已采纳
1回答
我在每个码头上配置了Mesos，马拉松，动物园管理员，Hadoop和Flink。我可以运行Mesos，马拉松，动物园管理员和hadoop，没有任何问题；我还在hdfs中创建了一个文件夹flink。顺便说一下，我配置了高可用的hadoop集群并运行，没有任何问题。但是，当我使用这个JSON文件在马拉松上运行flink时，我会在Mesos中收到失败的任务。诊断java.io.IOException:无法为高度可用的存储(高</em
浏览 5提问于2019-04-30得票数 0
回答已采纳
1回答
有人能解释一下从课本上摘取的黑体字到底是什么意思吗？“次级namenode的状态滞后于主节点的状态”意味着什么？提前感谢
浏览 3提问于2015-07-18得票数 2
回答已采纳
我有一个关于名称节点高可用性的问题。Name节点是如此重要，因为它存储了所有元数据，如果它被关闭，整个Hadoop集群也将被关闭。那么，是否有任何好的方法来接近名称节点高可用性，例如，当主名称节点失败时，有备份名称节点可以接管？(现在我使用Hadoop 1.1.2)
浏览 0提问于2013-08-12得票数 0
回答已采纳
1回答
据我所知，ZooKeeper是一个集群管理/同步工具，而 HDFS 是一个分布式文件管理系统，但在HDFS集群上是否需要ZK？
浏览 0提问于2017-04-02得票数 0
当Secondary NameNode失败时，hadoop集群会发生什么。
Hadoop集群被认为是单点故障，因为所有的medata都是由NameNode存储的。如果次要名称节点失败，群集将失败或继续运行，那么辅助NameNode怎么办？
浏览 0提问于2014-01-15得票数 1
回答已采纳
2回答
使用hadoop apache 2.7.1的iam自动动物园管理员故障超过控制器zkfc将采用击剑方法。是否有任何方法使sshfencce在配置中包含密码？
浏览 6提问于2017-04-05得票数 1
回答已采纳
1回答
如果名称节点崩溃，我们是否必须停止所有数据处理，然后手动启动(以防我们没有第二个名称节点)，或者如果我们使用Cloudera最新的ver.and (如果它崩溃了，它会自动命名次要名称节点)，在此崩溃期间数据处理是否在任何时候停止？(这里已经有一个二级名称节点)。
浏览 5提问于2015-03-09得票数 0
我试图更好地理解Hadoop是如何工作的，我正在阅读
NameNode是HDFS集群的一个单一故障点。HDFS目前不是一个高可用性系统。当NameNode关闭时，文件系统就会脱机。Hadoop 0.21+有一个BackupNameNode，它是一个具有HA名称服务的计划的一部分，但是它需要那些想要它的人(也就是你)的积极贡献，才能使它成为高可用的。来自http://wiki.apache.org/hadoop/N
浏览 0提问于2012-04-04得票数 4
在Ubuntu上安装Hadoop、Sqoop、、Spark、Java、Apache、Pig、Hive、Flume、Kafka、Mysql和其他软件包的顺序是什么？
浏览 6提问于2022-06-11得票数 -1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
