温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:00
呃,照文件咱也有了,那剩下的我需要去检查一下咱集群当中,我这些脚本是否都是正常的啊,那进到OT,进到这个跟跟加目录,然后进到B里边,那来检查逐一的检查一下啊,那首先第一个是咱们那个my circle to hts啊,那这个脚本的名字是不是有点这个不太对啊,我们脚本名字我们都是这种风格啊,都是这个下划线下划线,那这边呢,我们给你改一下。它这还是拖驼峰命名,咱改一下名字啊,要不然的话,我那里边job文件调用的是不对的啊,来MV my circle图这个我给它改成my circle,然后下划线to,这个HDFS.sh改成这个好,那这个名字改完了,改完之后呢,其他的应该是这个没有多大问题,其他没有多大问题啊,那现在我那个ADS层的脚本咱是不是还没写呀,咱ADS层的脚本还没写啊,这只有什么,只有这个,呃,DWD到DWSDS到DRT,那现在还得在VM一个vmd w ATT,然后下划线to。
01:02
下划线DWS.sh,好,那咱们现在呢,把这个这个脚本咱们写一下啊,那这个脚本呢,我其实也已经提前写好了,就在咱们这个呃,文本上面,在7.5这一节把所有的内容复制过来就行了。这里边呢,是咱们18张表的这个导数据的这个circle啊,都在这一个脚本里,好,那CTRLC拿过来。呃,放到这个文档当中。呃,摁一下这个JJ回到文档头啊,大家那个粘的时候呢,要注意你看看你的那个have的路径什么的,是否是正常的,是否是对的啊,这个一定要看清楚好,那shift zz,然后记得加上执行权限,趁着mod加XDWAT,然后to d wa这个名字还写错了是吧,应该是到ADS啊,那一会再把名字再改一回。好,那MVDWT到这个,它应该改成DWT到ADS才对啊。
02:00
ADS。这个名字咱也改过来了,改过来之后,那现在还有一个脚本没写,就是咱们需要把数据从HTFS上导到my circle对吧?最后一个S库op的导出脚本还没写,那把这个也写一下,HDFS_to my circle多买circle,然后点呃,SH,呃,那现在咱们给这个脚本拿回来,然后脚本在咱们上午的时候是不是在这儿啊,咱们把这个脚本拿出来啊,Ctrl a文档上也是有的啊,那直接找一下就行。好,那使用这个scoop导出的时候呢,我们正常情况下应该传一个什么样的参,是不是应该传一个off,你传off是不是这个数据呢,就会把每一个表的数据都导出去啊,那这边呢,我们前面只在买词库里边只建了一个表,所以说这个job文件这边呢,我最后往外传的时候呢,我只导了一个表。也就说我给他导的时候,我传的不是哦,我只传了一个ADS user topic,就只导了这一张表啊,咱们导一张表演示一下就可以好,那现在呢,呃,脚本咱也这个都准备完成了,脚本也准备完成了,那我想想还有没有其他那个需要我们去做的啊,加执营权限,什么加s HD FS to my。
03:14
点SH,好,那我们再来想一想啊,还有没有其他需要去做的准备工作,呃,哎有还有一点,咱们have当中ADS层的表,我是不是有一些还没建的呀,所以我需要把这个ADS层的表全部都给它,呃,全部都建出来,全部都建出来啊,那所以说这边呢,可能呃需要一点时间,因为这个表确实有点多啊,19张表,那我这个应该提前建好的啊,但是这边这个没有建,那我只能现在建了,只能现在建,那OK,我就在这演示一个啊,演示一个,然后我剩下的呢,我就不录视频了,因为建表这个没啥可录的,那一会呢,呃,要求我们把这个所有的表全部都在这个呃,Have当中全部建出来,那现在呢,我把视频录一下,一会我这个呃自己建一下就行了,那现在呢,我把这个,呃,视频先这个录一下。
我来说两句