00:00
好,那接下来呢,我们就可以去做它的一个测试了,对吧?啊,那集群当中的东西呢,我们都开了啊,包括Phoenix red这个都开了,你就不用管了,OK吧,那么他这个数据来自于下单表对不对。啊,ZK卡夫卡都是开的啊,那这个呢,它来自于这个下单表,没毛病吧,下单表,所以呢,我们要开的东西把DWD打开在这个DB。DB里边对吧,呃,那这个啊,就是我们运营的时候可以不开了,因为我们造数据的脚本里边没有去造这个维表数据,OK吧,所以就可以不开了啊这个呢,我们全部关掉,首先呢,应该是。预处理表。然后接下来呢,是订下单表对吧。预处理表消费原始数据,原始数据呢,由Maxwell拿过来的,对吧。
01:05
好,那。接下来这个就搞定了,接下来就启动DWS他自己了吧,对吧。诶,这个还没启动过呢啊,看大家有没有报错啊。好,那目前来说呢,看上去没有问题对吧,那接下来我们来运行脚本生成我们的数据对吧。CD。到OPT module,然后呢,DB log。然后呢,加了杠这样。追Mo DB啊。总理。啊,当然现在呢,我们是。
02:00
开窗之后去关联的维表大家记得吧,啊,所以造一次不够啊,你不要造一次说哎,没有数据出来那不够啊,对吧,因为我们大家记得关联微表在什么,在开窗之后是不是。还记得吗?我们先是开窗reduce嘛,这边是开窗聚合,然后再去关联外表,那打印呢,开窗之后打印的,所以呢,你造一次肯定没有数据对吧?啊肯定没有数据啊好,那目前来说呢,这个没有正常对吧,应该这时候过了十秒了,咱们再造第二次数据来。预警。一定要过十秒之后再造第二次数据啊。好,那我们来看这边的一个。结果诶有了对吧,先是reduce DS,然后PUDS速度相当来说还可以对吧,因为我们的数据量呢,不止一条嘛,啊它一下短印这么多啊,首先呢,我们看数据有没有丢,然后再检查这个数据本身啊,首先呢,诶video DS ctrl c ctrl f35条。
03:10
35条对吧,好,那么接下来我们看啊呃,Puds。35条首先,数据是不是没丢?对吧,Reduce DS也就是开装之后立马打印的,跟关联微表打印的结果怎么样一样多对吧?好,那接下来我们看这一个数据,首先你往上看reduce DS对吧,那这边呢,它里边的我们现在关联的谁啊。SKU跟s puu对吧。P是。Long值对吧,Po ID nu值,然后接下来呢,看。嗯,还有哪几个咱们的K3ID浪值对吧,然后trademark ID在这浪值对吧,那我们关联skuo是不是就补充这几个字段呢?对吧?那补充SKU是补充了三个ID,然后再关联s puu,补充了s puu。
04:06
那没毛病吧,咱们都这事好,那你上面看啊,都是呢,这个我们就不一个一个看了,那只有SQID嘛,对吧,再往下到SPU。DS,看这啊,首先呢,这个三有数据了对吧,然后嗯,P name有了对吧,呃,Trademark ID有了。还有谁呀?还有一个ID对吧,看有了吧,这就关联后的就是这情况,因为我们关联了两张表嘛,补充的不就这么四个字段嘛,三个ID一个name对吧,OK,那你随便挑嘛,你在下面,比如说这条吧,我也随便挑的啊,那你看这边trademark ID有了对吧,然后这个CATEGORY3的ID。有了。对吧,呃,然后呢,Po namek比较长啊,S po ID跟s po name看见没。都有了对吧,这些东西就是你要做测试到到最后呢,你就这样的看结果就好了。
05:07
你这样去看结果就好了,OK吧,这是我们所看到一个点啊好,那这个我们就可以。停掉了啊,等会儿呢,我们还是开这三个,反正这边都已经开启过了吧,啊,你一起停掉就行了,OK吧,这块我们就测试完成了,没有问题,完全没有问题,对吧,你没改过啊。
我来说两句