00:01
好,呃,那我觉得我们介绍的东西呢,也就差不多了啊,然后接下来的话,我们就开始准备做采集工作,能记得吧,开始完成采集工作了啊,那这个采集工作的话,那我就提前把这个图啊,嗯,拿过来对吧,就是我们所有的事情呢,都围绕着这个图来展开哈。只要你。想不明白了,或者说不知道该做啥了,回头看一看这个图。对吧,那我们首先现在要做的事情就是我们买SQ的话呢,诶已经有了,对吧,然后呢,数据的话我也能够生成进去,这没毛病啊,一会我再跟你说这个生成器,那现在就是你要有Maxwell能够把数据给我采过来,对不对。是这个意思吧,所以说接下来我们就一步一步来去展开了啊,首先你看一下这个maxwelll,你得去做一个安装,那它的这个安装呢,是非常非常简单的,我来说一下这个呢,我就不再带着你去装了哈,同学们不再带你去装了哈,我们在这个呃资料中啊,首先我告诉你这个资料中呢,我也提供了这个就是安max的安装包。
01:05
能看明白吧,我提供了这个安装包的,那我们所要做的事情呢,就是把这个Maxwell这个安装包啊,上传到什么呀,上传到你的烧下面对吧,比如说我上传到这个地方,上传到这个地方以后呢,你再把它解压出来,解压到我们的这个model下面对吧。这就是我的Maxwell啊,当然你可以改个名字啊。能听懂吧啊,这就相当于什么把它安装好了,那么安装好以后呢,我们来到这个Maxwell里面啊,这里面我们是需要什么去配点东西的啊,它里面有一个什么conflict.proper对吧?这里面是需要去改东西的啊,但是现在这里面改什么东西呢?我先不跟你说哈,对吧,我们稍后再来去改啊,我们先把这个每一个组件呢先搞定啊,就是先保证它是有的,那么Maxwell就相当于这个装好了啊,装好以后下一面是我们的这个买so的一个这个安装,这个我就不用带你去装了吧。
02:00
对不对,你学到现在了,你说你的买so都没有,那不可能的啊,买so是有的啊看一下呃,买so,那我就直接登吧,买so-ULT-P。对吧,这是我在买sole啊,而且的话,我里面是有这个相应的库的啊,其实我们这个现在讲的这个电商的这个什么实施项目啊,我们用的就是这个整ma这个库,能理解吧,我们用的就是这个整ma这个库啊好了,行,那所以说你看了哈,我们的买搜呢,不用你去安装了,然后呢,这个业务数据库的话呢,呃,你直接使用这个离线数仓的就可以了。听清楚了吧,如果说你这个呃没有的,那你什么自己去创建一下这个库。对吧,这个创建库应该都会创建吧,就create一个什么database就完事了,然后呢,导入这个数据表,数据表的话也是直接使用这个离线数仓的啊,就跟你们之前都是一套的。那你们之前这个建这个离下驻仓的时候,呃,建库的时候应该都是有一个脚本的吧,对吧?诶叫什么什么jama so啊,我记得应该是有那个脚本的吧。
03:05
你们自己去找一找啊,我看我这里面有没有啊。我这好像没有提供哈,呃,我这没有提供,但是我记得,呃,我记得我之前应该是有的啊,我找一下有没有啊。呃,对吧,我有一个啊,叫这个妙的so狗啊这样吧,呃,我怕你们这个没有啊,我把它这个拿出来好吧,嗯。我把它这个拿出来放到我的资料里面吧啊。放到先放到这个桌面哈,先放到桌面。好呃,到时候我再给你们发一下,如果说你这个实在这个没有的啊,那你什么自己去找啊,自己去用去啊。来在这啊,我就把它放到我的这个资料中啊。OK,放进来啊,行呃。
04:00
我相信大家应该都是有的啊好呃,那我们有了这个脚本以后的话,如果说你想导入这个数据表,那就什么直接去执行,那个直接什么执行,我刚刚诶就给大家去说了这个脚本就可以了啊,这是一个SQL的脚本,你直接去执行它就可以了。脚本应该都会执行吧。啊。我就不说了啊,现在你可以什么通过命令的方式来执行,或者什么通过我们的图形化界面工具啊,比如说这个SQ要吧啊,这种方式都可以去执行的啊来这个我不多说好呃,那这个有了以后呢,接下来我们再往后看啊,就是我们的基本环境准备好以后,下面就是我们要开启这个买so的这个blog。啊,那这个blog你们肯定也都是开启过的哈,我再来说一下吧,这个怎么开启呢?我们需要来到你这个买circleq的这个配置文件里面啊,它的配置文件在这个ETC下面有个卖点Co里面,然后呢,我们需要往它里面去加上这么几个配置啊,这个我都是加过的哈,所以说我直接过来,呃,涉及到什么C及到这个直接VM吧,ETC下面的卖点。com好看一下我加了这么几个配置。
05:06
啊,它加到什么地方啊,它加到你的这个标签下面的啊,一定要看清楚了,就是我们有一个my circleql d啊这个标签,然后在这个MYSQLD这个标签下面,然后呢,我们把它加进去,就加到这个下面就可以了,好首先这个serve.id啊,这个是你这个搭建组从的时候呢,你需要给你的每一个MYSQ呢,都分配一个ID对吧,那我就给这个主机呢,就分配ID就是一啊,然后这个log b啊,这个其实就是什么配你这个b log的那个文件。明白吧,那将来我这个blog的文件名字就叫都叫什么MYSO-B,后面是一个什么序列号啊,就是一个数字对吧,一会我带你去看啊,行,这个就是我们的什么呀。Blog的格式,我们配的还是一个肉的一个格式啊,然后下面这个是你要去监控哪一个库,因为你的买色库里面是不是有很多个库啊,对吧,那你要监控哪些个库的改动呢?那目前的话呢,我们就直接使用使用这个什么G妙这个库,刚才刚刚我让你看到了哈,对吧,我就直接使用这个库了,因为这个库呢,就是我们这个电商的那个库。
06:07
对吧,它里面有我们这个电商的表啊,Show tables看一下对吧,有这个好多张表,我们就直接什么使用这个库就可以了啊,所以说呢,我就让你去监控我这个库,然后别的库的这个改动你就别监控了,我也不要。OK吧,那你把这个配好,配好以后呢,正常情况下呢,你需要什么呀。呃,只读的是吧,来我们不用改啊,就正常情况下啊,你要什么呀,把这个都改完以后呢,那你需要什么重启这个MYSQL的服务,对吧,就是你执行一下这个system,然后呢,Restart一下my sod。对不对,诶你重启一下这个服务,那我就不需要重启了,因为我这个并不是说这个刚刚开启的啊,行,你开启完以后,然后呢,你这个重启完服务以后,你可以来到哇lib买SQL下面,然后呢,呃,没有权限啊LS-L你可以看一下它会给你去生成什么生成这种文件的啊,当然我这个是用了很久了啊,它有很多文件,如果说你刚刚开启的话,应该就只有一个这个文件。
07:10
对吧,如果你能够看到这个文件生成了,还有一个是这个index文件啊,就这个文件生成了,那就说明你的买或者blog呢开启成功了。能听到吧,就开启成功了啊好,那如果说你想做一个简单的测试,你可以怎么测呢?你就先记录一下,比如说现在哈,呃,你就先记录一下我最最新的文件啊,前面的就不要记录了啊。我就把这几个截个图吧。可以吧,好把它放到这,然后接下来干嘛呢?你就可以尝试着对你这个库里面的某个表的数据呢做一个修改。OK吧,来,那我为了方便修改,我就使用这个外部的工具了哈,我们使用下这个SQL。啊,你们可以用什么什么na那东西都可以啊。行,你看一下啊,我就是这个解秒这个库,然后我打开,打开以后呢,我们找到这个表啊,随便找一个表,比如说我找这个out info好吧,打开表打开以后呢,我能随便做个修改啊,你看比如说这个。
08:03
叫吴吴吴少对吧,123123,我做一个修改。改了吧。对不对,改了吧,改了以后来我们再回到这个地方看一下,好十度LS-L,好,你看一下这有没有变动哈。哎,我刚刚截的那个图呢。在这。来,你拿过来看一下,有变动吗?有吧,这个50这个是不是很明显已经变了呀。对吧,这个大小是不是很明显已经变了呀,说明什么,说明他就已经什么开始去记录你的这个改动了,OK吧,同学们好,那这样的话呢,我们这个买so的这个冰lo本呢,呃,就算是这个开启成功了。好吧啊,开启成功了啊行,呃,下面这个模拟数据的话就是呃,你生成数据,然后呢,看看它能不能把你什么把数据的这个呃记录到这个blog里面,那我们就先不用模拟了啊,因为刚刚我通过一个修改,然后已经看到这个效果了。
09:01
对吧,已经看到这个修改的效果了啊,我就先不再模拟了啊OK。呃,然后呢,我们接下来还有需要做的事情。那我现在把这个Maxwell呢也安装好了,然后呢,我这个买so呢也安装好了,而且这个冰log呢也开启成功了,那么剩下就是他们两个配合工作,我们应该怎么去工作。对吧,这个事情我们需要给大家去这个说一说啊,呃,我先停一下啊。
我来说两句