00:00
Hello,上微谷的小伙伴们很高兴啊,这么快又跟大家见面了,呃,那我是上硅谷的讲师光辉,那么本次呢,给大家带来。哈杜普集群的一个高可用。啊呃,那为什么会有这个高可用呢?因为大家都很多同学已经看过了海哥大海哥在B站上发布的一套最新的基于哈杜吧3.1.2版本的视频,对吧?讲的非常详细,甚至有源码等等的一个内容的介绍啊,但是呢,实际上那套集群当中其实存在一个问题,存在什么样的问题呢?叫单点故障,何为单点故障呢?学习过那个视频的同学应该比较清楚。好,那我们搭建的HDFS是不是由一个name node和三个data notde以及一个resource manager和三个node manager所组成的一套集群呢?
01:04
对吧,大家可以把。一扣在弹幕上啊,因为肯定是这样子的,对吧?好,那我们想当我们data node,或者说像noe manager这样的技能挂了一个之后,我问大家,那我们的集群还能不能正常使用呢?答案是肯定的,照样可以正常使用,是不是因为它只是从电,电本来就有多台?但是我再有一个问题需要问到大家。如果我们的nameno和。Resource manager这个进程它挂掉了呢。Data node以及no measure都没有挂掉,那我们的集群还能正常使用吗?答案是否定的,对吧?当然不能啊,那也就是说,当我们挂了某一个进程的时候,它会影响到整个集群。
02:06
会导致整个集群都不可用,那么这种问题呢,我们把它称为叫单点故障,而我们本次的课程叫哈多的高可用集群,就是用来解决。单点故障问题的,那么在课程当中我们讲了手动故障转移以及自动的,当然生产环境当中大家需要用自动的方式,那么接下来呢,我主要阐述一下在学习本次课程之前,大家需要掌握的一些知识啊,首先第一个是Java基础啊,那大家呢,可以上B站观看我们康师傅的。视频也就讲的非常的详细,那么第二需要有哈杜课程的基础,那也一样的,上B站可以观看我们大海哥所讲的三点一点X,最新发布的这套视频,同时还具备zoo cable的一个基础,同样在B站上也有我们提供的一个视频啊呃,那当然在这个基础上我们要搭建这个环境,其实大家需要掌握LIS。
03:16
啊,当然这个你有很多同学可能做开发的他都会对吧,或者你在网上找一些资料自学一下。网上资料咨询一下,当然也可以搜上硅谷发布的Linux视频,我为什么没有粘贴出来这个链接呢?因为呃,目前来说硅谷这个零六课程呢,稍微呃老一点,如果说你要学习的话也可以,因为我们现在目前线下课程当中还是用的这个呃3S。啊,这个版本的6.8 6.8这个版本的啊,所以说你拿这个资料去学习也没有问题,B站上搜索B站。搜索上硅谷。
04:02
啊,叫官方那找到我们Linux视频对吧?呃,把这四个看完之后呢,就可以看我们当前这个。视频了啊,可以学习一下我们在生长环境当中如何搭建一个高可用的哈多普集群,当然包括两个,一个HDFS,一个是。
我来说两句