一脸懵逼学习Hadoop-HA机制(以及HA机制的配置文件,测试)

1:能否让两个NameNode都正常影响客户端请求?

  应该让两个NameNode节点在某个时间只能有一个节点正常影响客户端请求,相应请求的必须为Active状态的那一台。

2:standBy状态的节点必须能够快速无缝的切换为active状态:

  意味着两个NameNode必须时刻保持元数据的一致;

3:HA机制,元数据共享存储,数据同步的问题:

  分布式应用:管理edits(同步数据)   qjoural:依赖zookeeper实现

4:如何避免状态切换时候发生brain split现象:     fencing:一是ssh发送kill指令,二是执行自定义shell脚本

5:hadoop分布式集群HA模式部署,三台机器跑集群:   第一台机器:Zookeeper1 NameNode1 zkfc1 journalnode1   第二台机器:Zookeeper2 NameNode2 zkfc2 journalnode2   第三台机器:Zookeeper3 journalnode3 dataNode1 6:hadoop分布式集群HA模式部署,七台机器跑集群:   第一台机器:namenode zkfc   第二台机器:namenode zkfc   第三台机器:resourcemanager   第四台机器:resourcemanager   第五台机器:zookeeper journalnode dataNode nodemanager   第六台机器:zookeeper journalnode dataNode nodemanager   第七台机器:zookeeper journalnode dataNode nodemanager

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏hbbliyong

Android studio删除工程项目

 本新手最近学Android都是用的eclipse。其实个人觉得eclipse不错,可能接触Android不久,倒也不觉得它慢还是怎样。对于Google的And...

3548
来自专栏点滴积累

geotrellis使用(二十四)将Geotrellis移植到CDH中必须要填的若干个坑

目录 前言 若干坑 总结 一、前言        近期干了一件事情,将geotrellis程序移植到CDH中(关于CDH,可以参考安装ClouderaManag...

3055
来自专栏信安之路

网络安全渗透测试

针对网络的渗透测试项目一般包括:信息收集、端口扫描、指纹识别、漏洞扫描、绘制网络拓扑、识别代理、记录结果等。下面就一一介绍。

1330
来自专栏dalaoyang

SpringCloud学习目录

Spring Cloud直接建立在Spring Boot的企业Java创新方法上,它通过实现经过验证的模式来简化分布式、微服务风格的体系结构,从而为您的微服务带...

5255
来自专栏数据和云

针对Sharding DB的单点故障,合理构建HA架构

作者简介 ? 何剑敏 Oracle ACS华南区售后团队,首席技术工程师。多年从事第一线的数据库运维工作,有丰富项目经验、维护经验和调优经验,专注于数据库的整...

3368
来自专栏Python小屋

Python+tkinter不允许退出程序的思路和实现

思路:基于Python+tkiner的程序,在单机右上角X按钮关闭程序时,会触发'WM_DELETE_WINDOW'消息,如果可以截获这个消息并改变其行为,就可...

2594
来自专栏吴伟祥

Oracle Java Mission Control 帮助

使用 Java Mission Control 可以监视和管理 Java 应用程序,而不会导致通常与这些工具类型相关的性能开销。它使用为 Java 虚拟机 (J...

1063
来自专栏FreeBuf

利用私有DNS,“查找我的 iPhone”可被轻松绕过

iPhone自带的“寻找我的iPhone”功能一直以来都是小偷们需要解决的问题之一。这个功能就像守护者一样,当你遗失手机时帮助你定位,而实际上小偷总能找到办法绕...

27210
来自专栏小怪聊职场

爬虫架构|利用Kafka处理数据推送问题(3)架构图

2115
来自专栏Vamei实验室

树莓派:光阴的故事

作者:Vamei 出处:http://www.cnblogs.com/vamei 严禁任何形式转载。

692

扫码关注云+社区