00:00
好,那接下来呢,我们就可以去启动HTS了啊,然后启动之前大家有一点要注意一下啊,我们启动不同服务的时候需要怎么办?是不是需要使用不同的这个用户啊,对吧?啊,这个一定要注意一下啊啊那现在我们开始启动,那启动的时候咱是不是有单点有群起啊,对吧?啊那现在呢,我们先给大家说一下单点怎么起啊,在这个安全环下,单点起和多点和这个群起都不太一样啊,我们先看单点起,单点起的时候我们先起namenode啊,那来看一下这个怎么起。是不是执行了一个这样的一个命令,大家看一下能不能看懂啊,来看一下这里边是不是有一个速度完了之后杠I,然后再来一个杠U啊,这个杠U是什么意思,杠I来解释啊,杠U什么意思?杠U的意思呢,就是哎,我使用后边这个用户的身份去执行后面的命令。能能能理解吧,那就说我现在是以谁的用户啊,我是不是相当于是以HDFS的用户的身份去执行我后边的这个命令,后边这个命令大家应该熟悉吧,HDFS杠杠demos当no,这是不是就是nameno的单点启动的命令,没错吧,那也就是我现在呢,是不是就实现了一这样的效果,我不用给它切到这个呃,HD Fi用户对吧,我直接在用途用root用户的这个,呃这个身份下边是不是就可以使用HD Fi的身份去启动name note用户来对吧?这样主要是为了方便不用把这个用户来回切这个理解一下啊,那这个杠I的作用是啥呢?哎,杠I的作用呢,指的是哎,当我使用HDFS用户去执行后续命令的时候呢,哎,去重新加载这个环境变量啊,这个理解一下就行了啊,要不然的话,它后边会报一个什么错误啊,是不是找不到这个命令啊,对吧,是这样,这个要理解一下啊好,那现在呢,我们在102里边去执行一下这个命令,来我们在102执行一下啊,来回车。
01:49
好,那现在我们继续一下,大家注意观察这个name no的进程是不是已经出来了,对吧?出来之后就说明启动成功了啊,如果大家再去执行这个启动命令之后,他没有起来,那怎么办?
02:04
看日志吧,对吧?啊,没有起来的话就看日志,看日志的时候一定要注意一下,有同学看志这会还还可能真不会看了,为啥不看啊,他可能习惯了啊,找日志在哪,内蒙多志在哪,是不是在opd module在哪啊,是不是那个hi doop hand logs对吧,Locks locks里边呢。进来对吧?有同学可能已经习惯了,上来之后我就怎么办,是不是ta要杠,比如说500完了之后呢?啊,什么hi豆I硅谷name not这个什么lot啊,有的人是不是会看这个日志啊,对吧,你现在看这个日志有用啊,没用,为啥没用啊,因为你现在不是用爱用户起的,对吧?你是用谁起的,你是用HDFS用户起的对不对?所以说你要看日志应该看谁应该看这个应该是hi do HD FS name notde hi do102log能理解吧,这个一定要注意一下啊,看是得会看才行啊好,我们继续往前停,那下边我这于可以去启动data notde了呀,对吧,那启动电node来把这三台节点都给它启起来,当然这三台键不都一样的呀,对吧,还是一样的套路啊,使用HDFS用户去执行name note,呃,去执行data note的单点启动命令,好,那这个命令三台节点都执行,102,诶103哎104哎,都执行一下,好,那我们稍微等一下啊,等一下之后呢,我执行一个S口试一下,看一下咱们的进程。
03:19
那现在note是不是也都起来了呀,对吧?啊,登起来之后我们继续按走,是不是还得有一个2n secondary note呀,对吧?然后往下翻,那这个命令呢,我就不再解释了,咱们直接拿过来,在我的104节点是不是执行一下就行了,来拿过来,然后呢,回车。稍微等一下啊,OK,现在是不是已经OK了,那现在呢,我们是不是就相当于把嗨,Lookop所有的进程都给它起下来了呀,对吧?啊,提起来之后我们就可以干啥了,是不是就可以去尝试的访问一下它那个外部页面啊,对吧?好,那咱们现在能看一下能不能访问啊,OK,那这个访问页面在哪呢?在下边啊,在下边啊,那这儿还有一部分内容,咱没讲这是啥,是不是那个群体呀,对吧?群体一会再说,咱们先尝试看看能不能访问啊,那我们现在要访问的地址也发生变化了,变化啥了?首先咱们访问的协议是不是变成HTPS了,对不对,完了之后呢,端口号是不是也变了,变成啥了,9871了,这个要注意一下啊,来,我们回车。
04:13
啊,回来之后你会发现此处是提示一个不安全,这个不安全为啥,因为证书无效,能理解吧,这个我们自己生成的啊,这是我们意料之中的,对不对,完了之后,那这时候怎么办,怎么防呢。对,点高级啊,高级高级完之后呢,咱们就点继续前往就行了啊来点点完之后,我们是不是现在就来到了这个呃,HDFS的外部页面啊,对吧?那但是这里边呢,会有啥,比如说点击no,我们里边是不是有这个三个no的节点是没有问题的,都起来了,对吧?啊,这个是没问题的啊OK,但是呢,你现在尝试着呢,去访问一下它的这个文件,你看啊,你能访问吗?是不是不能访问,为啥不能访问呀?因为你现在没有认证对不对,是不是得先经过认证之后,咱们才能去访问这里边儿的内容啊,对吧,你现在是不能访问的,那到底怎么认证,我们后续再说啊,咱们现在先把这个环境打起来啊,好了,我现在呢,就已经呃完成了这个单点启动了,那接下来再说一下这个群起啊,群起这边呢,我们需要做两步,哪两步第一步。
05:14
我们需要在主节点,也就是hi度102这台节点去配置一下HDFS用户到所有节点的免密登录,这一步大家应该能理解吧,你看我们之前使用爱用户啊,去启动op的时候,你是不是得配置op用户与op用户从A从那个海102到其余所有节点的一个免密登录,那现在我们是不是换成HTS用户了,那是不是同样得配这个免密登录啊,这个一定要注意一下啊啊,那现在呢,我就先去配置一下这个免密登录啊,这个免密登录的配置呢,我们需要先切到这个HD用户,那首先我们秀一下啊,SHDFS啊,OK,诶经过来了,过来之后呢,咱们怎么去配置这个SSH免密登录啊,那首先我是不是得先得来一个SSH-k generate对吧?啊,那完了之后回车是不是再继续回车,再继续回车,再继续回车,那现在我们的呃公钥四钥是不是就生成好了呀,对吧,生成好之后呢,咱们需要干啥啊,是不是需要执行一个SSH-copy ID完之后,后边比如说HI102。
06:14
弄完之后呢,输入yes yes之后呢,是不是需要输密码啊对吧,我密码就是HDFS啊102有了完之后呢,103,哎,然后呢,输入yes啊,Yes之后呢,还是HDFS,那我们再继续,那应该是104对吧?啊码之后yes,那yes之后呢,是不是还是输密码HDFS好,那现在呢,102~103104以及102的这个免密登录咱就配好了对吧?配好之后别忘了啊,我现在是HD Fi用户对不对?我再切回来,我再exist一下退出来,退来之后是不是又退到root用户了呀?OK,那完事之后我们继续往下进行,那免密配好之后呢,我们现在还是不能使用群体脚本,我还得怎么做呢?还得再去修改一下我们那个群奇脚本啊,需要修一下群脚本啊,那群脚本在哪呢?是不是就在加木的并目录下边啊,不是加就是这个,呃,海杜的加目海do home啊,它的这个,呃,下边咱们去找到这个群新脚本,来我们去找一下啊CD到OBD,呃,这个modu完了之后呢,这个hi doop应该是对吧。
07:14
完了之后呢,我们找到那个start这个DFs.SH脚本对吧,打开,那打开之后呢,我们需要在它的顶部,那当然不是不是顶部,不是第一行啊,不是第一行就是在随在这个下面的内容之前,随便找个地方,比如就在这儿,诶我们需要加上几个,呃,这个参数啊,加什么参数呢?我们来看一下,就是这样的几个参数。来,我先加上再给大家解释啊。看一下应该能懂吧,是HDFS啥意思,是不是就是告诉咱们这个取拟脚本啊,我去启动,哎,咱们这些进程的时候用谁起对吧,是不是用HDSHDFS取他啊,用HDFS其他用HTF其他对吧?就声明一下这个启动用户这实很简单,好,那这个改完之后我们关闭shift的CC,好那这个改完了之后呢,我们再往下走啊,就不需要再做其他的配置了,那这时候呢,我们实际上就可以使用这个群体脚本去启停,去启动咱们的HTS了啊那当然呢,呃,有有群体是不是还有群停啊对吧?群停咱们是不是也得去做相样的配置,回头吧,我这儿有一个注啊,那现在呢,我们把这个群停脚本也给它配置一下。
08:28
来我们现在呢,进到哪进到这个,呃,OT,然后就在这对吧,那咱们找的这个群本是不是应该是和D点上对吧?打开完了之后呢,也是在我们这个脚本内容的前边给它加上一个环境面带,来右键粘贴一下啊,跟刚才的内容是不是一样的呀,对吧?那完之后我们shift的CC啊,那现在我们的群取行动脚本就准备好了,那准备好之后咱现在是不是就可以测一下来,对吧,我测一下啊呃,那我怎么测呢?我现在的进程是不是都都运行了大家对吧?来SGPS一下,那我现在先停,停完之后再启啊,然后来停一下stop和DFS,注意啊,我们在执行这个脚本的时候,你说我还需不需要切到那个H的用户。
09:11
需不需要就不用了,为啥不用了呀,因为在脚本里面是不是已经声明了对吧,那孩子我在自己起的时候,它会自己切到这个H用户了,那现在我们停一下。嗯。稍微等一下啊。好,现在停式应该是没啥问题吧,我们S高级呀,那是不是已经没有了啊,那完了之后呢,我再给它砌起来,来star的这个DFS,完了之后呢,我们再回车。好,现在起好像也是正常的,对吧,啊,也是正常的啊,稍微等一下。稍微的有点慢啊。行,那应该是提起来了,我们现在呢,尝试去访问一下这个嗨,DOOP102的这个界面啊,那当然我们应该访问的是应该是嗨,Do啊,诶102冒号应该是9871对吧,9871,那完了之后呢,前面应该是HTVS啊啊,那现在我已经能够正常访问了,三个data notde也都起来了,那是不是说明我们群起新定脚本都是没有问题的呀?OK,那现在我们HDFS就算是成功的启动了啊来,我把视频停一下。
我来说两句