00:00
好,那我们要启动,刚才我们说了阿波罗端,它分为客户端跟服务端,那毋庸置疑肯定先起服务端对吧,也就是掀起SS那边。对吧,也就先起这个FORM23这两个内容对吧?好,那FORM2呢又用到了HDFS对吧,而且还FORM1呢又用到了have的日志,所以呢,我们先把什么哈多这一套给启一下啊,然后呢,等着去开那个have好啊。这个目录呢,我是进到的分三里边啊,现在肯定是空的啊,等会呢,我们看这里边能不能生成数据啊。等他启动,呃,启动好以后呢,我们还要等待他退出什么安全模式,对吧,现在还在安全模式里边。
01:02
还有个几秒钟,稍微等一会啊。好,这边已经搞定了,那么接下来呢,我们就这样啊高克隆,呃,这个上面正好这不有123嘛,对吧?啊第一个副本,第二第三个副本,那我们就对应的去起F1F f3啊F2上面呢,我们去起那个第二个啊还记得启动命令,今天早上好像是出的题当中也回顾了一下是吧,并from NG,然后A-C-N这个注意是A2吧,对吧,跟这个名字对应的二嘛,A2啊第二个分母啊,然后杠F是job过底下,就如果一底下的哪个首先是弗。
02:00
然后这个是不是from到HDFS对吧,所以呢,我们写的是from到DFS这个com日志呢,我们就打印到文件当中就好了,对吧,我们就启动。好,那么这个呢,给它写起来等着就行了,对吧,如果说你不放心,我们可以去干什么,Mo到from里边,到这个老斯底下,然后呢,T-200对吧,看一下最后200行的日志。没有问题,他都起来了,你可以等会呢,你尝试你你这样,你正好我给他尝试一下,我CTRLC干掉啊,然后呢T-F,我监控这个日志,然后呢,我先去写F1。第一个里边它是不是用到阿波罗think。用那两个think对吧,我们说的它是客户端,那你想嘛,服务端没起,客户端能起吗?能不能写肯定不能的,对吧,那注意啊,我刚才已经把这个CTRLC干掉了啊。
03:01
已经没了对吧,啊没了,而且呢,我这边是坚定的日志啊好,那我们b from NG叫A的杠C-N,它是不是N1呀,对吧?杠f job底下group底下有一个from。这个是什么?从fire到from?对吧,它是监听的本地文件,然后呢,传给梁柱啊总。看着好像挺正常的对吧,看啊4141端口直接连接,同时应该也还能看到4142端口去接连接。因为我们第一个里边是不是有两个。Think呀,一个绑定了C141,一个绑定了C142啊,所以说从这个方面也能看出来,这个就很像这种问题啊,就很像大家HDF没开,然后直接去访问HDFS。类似于这样情况对吧,或者说IDFS可能在安全方式你去访问它都会拒止连接,会给你一个端口号说区间连接,说明服务没起,或者说你有没能记得,诶我还这样,明明开了呀,为什么还这个所谓的8020端口拒绝连接呢?
04:14
有可能你那么多都挂掉了嘛,你是开过了,但是由于存在一些问题挂掉了,对吧,你一看到这种拒绝连接,那你是首先你要看的是端口号啊。你要非常清楚这个端口号到底是谁的。然后你才能定位到哪个进程有问题。对吧,类似于我们那天提到经常说的,在提交任务的过程当中,提交给养任务过程当中,它有可能会报的是8032等的具体链接,那是因为你resource manager没开,因为我之前说了,你resource manager服务端口就八零叉二,你提到任务都是提交给八零叉二端口啊,所以每一个端口呢,还是要去记的,还是要去记得啊,每一个服务的端口要去记的,因为我们在课堂上会去讲这些东西啊,那这个东西呢,我们先给它停掉,因为他一直在那报错啊,一直报错,一直重试连接嘛,还发现连接不上啊好,那我们刚才所看到的是不是先起业所谓的服务端呀,对吧?啊,先把它起起来,然后103上是不是也有一个服务端,C142端口的服务端,那还是一样的,B from nd叫A-C杠杠N,那就A300对吧,你就看上面这个就行了,A3-F底下group底下的到哪啊,这个是。
05:30
哪个到家对吧,到这内容。好,那两个服务端起立来了,那这个时候我再去启他有没有问题,没有问题了,对吧?啊,再去启到启到好以后我们为了能看到数据效果,我们是不是还要得打开have,让它生成数据啊,对吧,因为我们监听的是不是have的日志啊,CD到open Mo到have a have。
06:00
好,它这个时候呢,就会产生热了啊,产生热,那么接下来呢,我们看一下啊,呃,第一个本地文件是不是data塔目录下的FORM3,我们看啊看有没有,第二个对于I而言,我们放在了FORM2里的年月日。小时二氧化碳风二仍然是小时对吧,所以呢,我们先看本地啊,本地比较方便,对吧,在这有没有数据过来了,对吧,而且呢,这个时候我是不是没有去操作have了。对吧,啊,没有操作have在这没有操作have,那正常来说have里面没有没有日志了吧。我们再多等一会儿啊,然后我们去看这个IDFS。FROM2刚才我们看FORM2里边用今天是不是有了对吧?啊,之前是没有这个数据的,然后零九啊,然后呢,这个数据也已经刷新了。对吧,啊也已经刷新了,呃,这个时候这个我们知道,如果说没有新数据,他这一定不会产生新文件,对吧,他必须要有新数据去出发,哪怕你到了什么一个小时了等等怎么样的,那接下来呢,我们就看一下这啊。
07:09
它可不一样,对吧,哪怕你没有数据,你看这里边是什么,是个零,它只要它默认的是么,30秒呢,我看到它只要到了30秒,它就会怎么样,它就会生成一个文件啊,也就是说这里边你再如果说过是不是又有一个了啊,因为刚才聊天的时候可能又过了30秒啊,如果你不关,那这里边大量的什么空文件啊,大量的空文件啊,甚至都不是小文件了,都是空文件了,对吧,里边都没有东西啊,这是本地的啊,本地的当然你可以设置为零给它禁掉,那就它都干什么。往这一个文件里面写啊,他就往这一个文件里面写啊,好,这是我们所看的这个内容吧。
我来说两句