00:00
好。那怎么测试呢?来,首先还是第一步,我们先去写一下它的数据流和所需要开启的进程。对吧,好,那第一步数据流。我们一块来想啊,第二步就是程序,从我们开启的程序的角度来看。呃,数据流,注意还是一样的,外部APP你想架构就行了,对吧,到我们的N。And,对吧,然后呢,到我们的spring。Spring模块对吧,之后呢,将数据写到了MY啊MYS呢,它会给我排blo,然后呢我们用Li APP。弗APP,当然大家知道这个是弗Li CDC对吧,读取blo数据啊,读取blog数据,好,那接下来呢,它写到了我们的卡不卡啊,这个呢是ods层,然后接下来由flink a pd消费这个ods层的数据,将数据。
01:16
干什么事又写到卡夫卡和埃啊,或者叫菲eni?对吧,都写到这些个地方啊,写到这些地方,这要注意一下没问题吧,这是我们的数据流也分流嘛,分两个啊,大家卡不卡呢,对应的是DWD这边呢,对应的是DDM。D单位D这个呢是DM。对吧,Phoenix是DMOK,这是我们的数据流,你要清楚,好,那接下来我们去想一想,我们的程序要注意一下业务数据呢,其实我们并没有去搭这个频部的,也没有去做N,这做什么负载均衡,没有做这个事吧,所以对于业务数据这一块啊,这三个。
02:06
这三个相当于谁呢?我们统一的用一个东西来代替的叫Mo DB。要理解这个事儿啊,我数据流是这样写的,但实际上我们开启的最后开启的进程。只有他自己。只有他自己。OK吗?这个能不能理解?应该没问题吧,对大家呢,可以扣一波一啊。好,那接下来我们继续,诶到my circle,那肯定就是正常的my circle对吧?啊好,那接下来弗另格ABB这个呢,我们记得叫弗Li格CDC这个程序对吧?好之后到卡夫卡啊,那卡夫卡呢,还是卡夫卡这个呢,要依赖于CK,好然后接下来又是我们的弗lib,这个呢,就是贝斯DBAPP了,贝斯DBAAPP对吧?然后又到卡夫卡,卡夫卡呢依赖于这个ZK我们知道,然后呢是菲enix。
03:29
最终呢,需要写到phoeni斯,Peni斯呢依赖于H斯啊,但S呢又依赖于ZK和HDFS啊,所以我们要开的时候要注意一下,你要想整个的能测起来,这些东西服务啊,都要去开起来啊,都要去开起来,对吧?是这样的一个情况要注意一下对吧?好,这是我们所看到,那接下来呢,我们就对应的把这些服务器拍起来做一个测试,对吧。先把这个集群当中的东西我看一下。
04:01
骑行上我们要看DZK,卡夫卡对吧,贝斯,然后菲尼克斯呢,我们可以进去看一眼。好,先开HDFS,因为它要等待推出安全模式嘛,所以我们先把它打开,然后呢,我们再开其他的。不要浪费这个时间对吧。启动HDF之后,我们启动这个cable,然后接下来必须要启cable,因为卡夫卡都依赖于这个cable,对吧?好,这个起来了,我们起压开卡。还是靠GPS,呃,那这边进程呢,都已经启动了,接下来呢,我进到这个。外B页面我看一下这个哈杜HDFS有没有退出这个安全模式。
05:05
好,安全模式已退出,没有问题,接下来呢,我们继续启动。然后我们要测往卡巴卡去写,往这个埃贝斯去写,对吧,所以呢,往菲尼克斯写,那接下来我们进到这个菲尼斯。嗯,然后我们也要等待这个初始化完成。等待我们的出手完成,再去开启我们的Phoenix,因为他们之间是有互相依赖的关系,对吧?等我们能看到所有的用户表的时候。对吧,它就可以了啊好,你看现在这个表呢,还是以reading的名字命名的啊,还不是表明呢,对吧?啊,它只能告诉我们是reading,哪个reading,也就是说它现在读取的是原数据信息啊,就Meta表的信息最终呢,会变成这个表的样子啊好,那这个开起来了,我们接下来配S。
06:24
加叹号table啊,那我们呢,有这张表对吧,我们就拿这张表做一个测试啊,C的新啊,你现在不用着急说,哎,我是不是应该把所有的表都倒过来,不用啊,就一张表一张表做测试,现在这个时候是我们昨天所写的数据,对吧?昨天我们所写的数据没有问题啊好。呃,那接下来呢,我们可以做测试了。
我来说两句