00:00
好,各位同学,那接下来我们继续往下进行,接下来呢,我们就可以准备去做这个全流程调度了啊,那在做全流程调度之前有一些呃说明我需要给大家说一下啊呃,首先大家得根据自己的实际情况去采取不同的措施啊,首先第一个啊,咱们得明确,就是我按特卡班去做咱这个全流程调度的调度的时候呢,咱是分为两种情况,一种情况是指定一个ex去执行,另一种情况是不指令,然后呢,让@卡班自己去选一个ex去执行,对不对,OK啊,那这两种情况我们现在要做的这个工作是不太一样的啊,我们先看第一种,先看第一种啊,那你说第一种情况下,我是不是指定102去执行,对吧?那这时候你说我们需要去做哪些工作?我们就拿龙吧。啊,首先我们需要确保我们102这一台节点上面的咱们所有的脚本,Scoop同步脚本,以及咱们那个数仓每层的脚本对不对,到底怎么样,是不是都得加上这个认证的语句,我们是不是都已经加上了,没问题对吧?那除了要保证加上这个认证的语句之外,你还得保证一点,还得保证什么。
01:07
还得往这儿,你还得保证阿兹卡班是能够去访问咱们这些脚本啊,为什么?你想想啊,当之前没有开启认证之前啊,没有开启认证之前,咱所有的用户是不是都艾特硅国对不对?那我启动阿德卡曼的用户是谁?是不是也是艾特硅国对不对?那所以说我最终访问这些脚本的这个进程是谁?是不是阿德卡文Q对不对?那你的身份是谁呢?是不是艾特硅谷之前都能访问,但是现在不一样了,现在咱们阿斯卡文谁启动的?是不是阿德卡班用户启动的对不对,那所以说访问这些脚本他的身份就是谁了,是不是就是阿德卡班了,对吧,就咱是不是得保证阿德卡班得拥有对这些脚本的访问权限才行,对不对啊,而且我现在只需要保证他能访问102的就行,是是这个道理吧,因为我指定102的嘛,对不对?诶,这是在这种情况下我们需要做的工作啊,那如果说大家呢?呃,在跑这个全流程的时候,没有指定102去执行这个任务,而是什么呢?而是让阿德卡湾这个web sor,他自己去选择这个ex去执行任务,那你要做的工作应该有哪些?
02:11
首先第一个你得确保你这三台节点上面的每台节点的脚本都得加上那个认证的语句,也就啥意思,也就是你得把102这个加目录下面的所有脚本得干干啥呀,改完是不是得分发一下,那刚才我们是不是只改了102的了,对不对啊,那注意一下啊,如果同学你没有指定102,那你就得把这个加录并目录下面所有的脚本都分发一下啊,就刚才我们改的那些啊,那除此之外呢,你还得保证啥,还得保证是不是阿斯卡曼用户拥有对我们每台节点的艾特硅谷的加目录下边的bin目录下边所有脚本的访问权限。而不是只保证102的能理解吧,啊,这个一定要注意啊,那其实说白了,如果你让阿斯卡班自己去选一个EXQ2跟我们自己指定一次Q点,其实就差了一个啥,就说就差一个分发对吧?啊对不对,咱们把102都处理完之后分发就行了,就这样的啊,这些注意一下啊,那现在我们开始去这个做相应的工作啊,那我这儿呢,我还是采用这个指定102这一台节点去跑的形式啊,那所以说我这儿呢,其实我只需要保证啥就行,我只需要保证102是OK的是不是就可以对吧?我102的那个认证都已经加上了,那现在呢,我是不是再改一下这个访问权限就行了,对不对,大家来看下我这怎么改的啊,来我看102,大家注意观察一下,我这干啥了,我这是不是将艾特硅谷它的这个加目录的这个所属者改成谁了,是不是改成艾特硅谷所属组呢?是嗨度组对不对?完了之后他的权限是啥?
03:38
是770对不对,那也就是什么,是不是也就是爱特硅谷用户拥有对我这个加录的哎所有权限对不对,那还有谁是不是还do组下面的所有成员也拥有对我这个诶加目录的所有权限呀,对吧?啊那我的@卡班用户属不属于爱组呢?呃,属不属于这个嗨组呢,属不属于属于,那刚才咱们是不是已经呃给他指明了他所属组是hi度过来对吧?所以阿德卡曼用户现在是不是能够访问我所需要的数据了啊,这个要理解一下啊啊,那现在我其实只需要改102就行了啊,那然后呢,如果说同学啊,你没有指标102,那你是不是得把这个其余每台电的都改一下对吧?那我这儿也都改一下吧,啊这个也不费事,诶,改一下,那这个呢也改一下OK啊,那也是到现在为止呢,我这个所有的准备工作应该都准备完了啊,准备完之后,接下来我们就可以去做这个全流程调度了啊,做全程调度啊,那现在呢,我开始调度啊来咱们打开阿斯卡曼的工作界面,然后还是找的谁,是不是还是找到这个JA帽这个全流程就行,哎,这个其实不用改啊,那完事之后呢,我们继续进行啊。
04:38
那下边呢,我们需要干啥?是不是需要点一下这个inscu对不对?完之后呢,是不是需要点一下这个flow perter啊对吧?那首先第一个参数应该是谁DT对吧?DT船2020-0681几116了,这回对不对?而下边这个我这因为还是要指定162这些节点嘛,所以说我是不是还得加上一个柚子EE,呃,然后这个Co这个参数对不对?完了之后呢,我需要指明1EXQ ID,那我这是多少是不是一啊对吧?那现在呢,我给它来一个A1,诶给它写上,那这样一来的话,我这是不是就已经把所有参数都准备好了对不对?那当然下面这个参数是不是可以不写啊对吧?要不写的话,你就得保证你得把加目录的所有的脚本处理完之后,得干啥得分发千万别忘了啊好,那这个完事之后我点击excu。
05:23
好,然后点击continue。啊,那这时候这个任务呢,就已经开始执行了啊,那当然这个任务可能还是得执行这个20多分钟的时间,等一会儿他执行完之后,我们再来看结果就可以了啊好,那现在我把这个视频停一下啊好历时27分钟啊,那数仓的全流程呢,就已经跑完了啊,所有的照本都是执行成功的状态对吧?啊那就说明哎,咱现在这个安全环境下的全流程调度呢,是没有问题的。
我来说两句