00:00
那么再往下走的话呀,那么这里呢,我感觉比较麻烦的有一个地方就是什么呢?就是每次呀,在起的时候,对吧,咱们一下子是不是还得去起,咱们到202上,203上,204上,分别把咱们自己写的对日志处理的这个应用,这个价包是不是得起一下呀,这个N这个是不是还得起一下呀,所以说呢,我觉得这比较麻烦,对吧?那怎么办呢?我可以去写一个脚本嘛,对吧,那你想咱们这里整个这块东西,整个这个东西,它是不是其实都是对日志进行处理的呀,对吧,整个这个东西啊,它都对我们的日志来进行处理的,对吧?那所以说呢,我希望写个脚本,对,那这脚本一启动,把什么NEX呀,这三台我们这服务器都提起来。对吧,容易录入一关闭,把这些东西呢,都给关闭一下啊,都关闭一下好,那咱现在呢,就写个脚本,这脚本就不带大家写了,因为咱们应该写过很多脚本了,对吧,那我现在呢,把这个脚本拿过来啊,CTRLC,然后接下来这个脚本应该在哪去写,把这个202停掉,然后呢,203这个停掉,204停掉,然后接下来在咱们这里边,我呢要把我们的ND呀,那也停掉,那应该是o BT model,然后ND,咱们下边有一个ND停掉,怎么停。
01:09
杠s stop啊,杠s stop PS,杠EF,然后呢,看一看我们当前ND这些东西已经停掉了,知道们该东该停的东西啊都停了,然后呢,我现在写脚本,那么写脚本的话,是不是应该来到我们现在它的一个home对吧?来VM,然后呢,Home at硅谷,然后BIM下面,因为以前是我脚本放在这了,对吧,那这个呢,因为我以前在上班,我已经把这脚本写过了,对吧?所以说呢,直接对吧,这里有一个我们这个logo sh,大家直接简单看一看就行。啊,直接简单看一看就行,对吧,那无非是什么呢?无非是我们现在第一个啊,指定一个什么Java的目录,指定一个我们这个APP对吧,这个名字就你要运行谁,然后接下来那我现在要在三台机器上启动的话,那是不是应该我就做一个循环呀,那每次循环的时候呢,那我要执行什么,我是不是直接扎va杠架呀,对吧?那么Java杠架,那么你得知道我这Java在哪对吧?那么所以说呢,我要执行把这个如果说啊,咱们DDK的版本不一样的话,同学们这块你要改一改对吧,就这会JAB应该是你的机器上你的Java它实际所在的路径对吧?那么另外一个咱们现在有一个地方需要改啊,咱现在有地方需要改什么呢?在我当前这里边有一个我这个价包,这个价包是不是技贸0523杠唠呀,但是呢,我在这里大家看我现在这个是上班的这个0321,那这个应该改了0523对吧,那么当前你如果你们下去做的时候,这个名字应该和谁,是不是应该和你们价包名是不是保持一致啊这个价包。
02:41
是你们自己打的啊,这个架包是你们自己打的对吧?然后接下来当去这个国川start的参数的时候,那么我先去启动谁呢?我先去把咱现在这些日志处理服务提起来对吧?那么同时呢,咱们是不是得在我这里,因为我在幺零这个202执行吧,我得把这个N这呀给它提起来啊,把N提来,那么如果停的话,同学们对吧,那我现在呢,先把N的停掉啊,先把它N的停掉,然后接下来把咱现在这三台机器对吧?那么给它停掉,其实这个停掉炸包是不是其实就是K对吧,其实就是Q,好了,那我现在把这个呢,给它拿一下对吧,给它干掉。
03:18
啊把它保存,那保存完之后呢,那么我现在SQDPS,那目前啊,在我当前我们现在这个机器上对吧?现在就是卡夫卡运行了,然后呢,这里运行了一个consumer对吧?然后还有一个是我们to keepper对吧?那么现在呢,要去启动我现在应用,那如果要启动的话,那应该是我们这个log.sh,然后呢,Start是吧,来到咱现在看一看我们现在启动,那么在202203还有204上,那么这个东西是不是该启都起来了,NG的图是不是起进来了对吧?那么启完之后呢,那你得确定一下,首先呢,你确定咱们的NG个CR是不是启动成功了对吧?来在这里grape,然后呢,N这对吧,那N这一看没问题对吧?那么除了N这之外,咱们是不是可以看一看我这架包是不是运运行成功了呀,对吧,那么架包那么就是Java对吧,所以说我可以通过咱们的FQ来查看对吧,GPS啊对吧,那么你可以看到在我202厂有一个架包运行。
04:18
203章也有一个在运行,204章也有运行,呃,那么怎么样看一下咱们刚才的效果里这个效果是吧?我是不是得看一看它是不是对这个有我们的数据给它生成了落盘了吧?对吧?那要想看这个效果,你在202上来到我们的DEMO贸这里边,这里边是不是有一个APP log,当前的APP log是不是接收咱们这数据然后落盘的呀,对吧?那我想看一看是不是有数据过来可以怎么办呢?Tell-F,然后呢APP log这个呢是我202,然后接下来在203上呢,那也是对来到我们的经贸2020,然后呢T-F,咱们呢这有一个APP log203,然后204上呢,也是进入到我们这DEMO Mo,然后接下来T-F去执行一下,对吧,我们这个啊命令对网现在呢,做个监控,卡不卡呢,一样也要监控起来,现在卡不卡当是没关呀,对吧,然后我现在在这里把这对该提的都提起来了,咱们是不是就可以再运行下来对吧。
05:18
那我来到我们的r pap log里边,在咱当前这个目录里边,对吧,这个目录干什么的,说生成模拟数据的,执行我们的Java杠架j Mo,然后呢,咱们模拟生成数据对吧?那么具体的这形式什么样的对吧?来看一看能不能把这东西啊,这个给我传过来对吧?来我现在运行一下。大家看这个数据是不是都是都过来了呀,对吧?哎,那么这块呢,有了,然后每一个我们这个20203,它数据呢,也落盘了,卡卡的主题呢,也接收到了,对吧,那这样的话,咱们现在呢,这个日志处理这块就完事了。对吧,日出理就完事了,呃,那么咱们呢,这个项目呢,讲了这是一天对吧,多一点对吧,将要将近一天的时间对吧,那么说老师那你这块主要目的是什么呀,同学们对吧,你像以前咱们在我这个离线这块,咱们日志过来时候直接落盘了呀,对吧,那么主要呢,就让大家把咱们这块这个形式对吧,那么得理解好,因为正常情况下这个日志呢,那应该是我们这个对吧,Java这边对吧给你对吧,就具体处理的话,那可能是什么呀,也也有大部分大部分公司啊都是Java处理好了,说我现在我做实时分析对的这日志,那这个数据来源于哪这个日志呢,有可能让你直接去卡巴卡里边去取了,对,就Java已经把这个日志处理程序,就咱们现在自己,我们我我们这写的这个东西也人家已经写好了,人家已经把这数据呢,给你放到我这卡不卡的这主题里边去了,你作为大数据成员,你做这个实时分析的话,你直接从卡卡的主题里边来取数据就行了,对吧,但是呢,那么稍微一偏的话,这个事儿就得你来做。
06:55
对吧,就是你们公司如果说我现在只说说我现在这个东西日志对吧,我呢并没有交易Java,就这块东西没有交易扎va对吧?我现在只是通过咱们前端买点,然后把数据给采集到了,把单采集到之后发送到某一个我们这个端这个这个外部地址去,那么具体这个怎么处理,那么你应该会啊,这块东西你应该会对吧?你们觉得整个这块难吗?应该不难是不是对吧?这块其实稍微麻烦点地方就是什么呀,对吧,你们整体的流程是吧?整体的流程是吧,你们应该怎么来处理好了,这是关于我们现在呢它的一个是吧。
我来说两句
6
nice