温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:00
刚刚我们已经把咱们的这个本地环境准备好了,而且已经能够有基本的操作了,那接下来呢,我们这边有一个监控的页面,这个监控的页面呢,其实在咱们的这个位置,它有提示大家看。把这拷贝一下。打开浏览器,然后呢,输入回车,回车以后,其实这就是我们的计算的监控页面,我们刚才执行的就是一个collect的方法,然后呢,他提交的时间,他持续的时间以及他的任务,这些都有记录,如果想看的详细一些的话,点击进去,点击进去以后再点,那么里面会有比较详细的这些参数啊和信息,这个就是一个监控页面,诶老师,那么我们以后难道都是用这种命令行工具来开发程序吗?那不可能对不对,我们肯定还是用idea开发吗?但是你idea开发那怎么来用到这个环境呢?同学们看我们的这边有说明啊,嗯。它有一个叫提交应用,你在我们的idea当中把咱们的程序打成架包,诶提交到这个环境里面,那也可以执行啊,那我们这里给大家演示一个小例子,大家看拷贝,拷贝以后咱们拿过来,拿过来以后会发现这边可以执行一个指令,这个指令叫做B,叫Spark submit,顾名思义叫提交,那么这个提交当中有一个叫杠杠class,那么这就是我们要提交的类名叫18个派,那么这个类在哪啊?诶,咱们有一个价包,这个价包就是告诉你它的类所在的位置,那么这个价包呢,是我们自带的一个叫example,大家看一下来。
01:48
在咱们的这个位置有一个叫example,里面有一个叫架式,里面有一个价包,诶是这样,那么咱们刚才的这个类叫18个派,就是这个架包中的类,那好,那这里面还有一个参数叫做杠杠master master就是顾名思义就是一个环境了,刚才不有local吗?这就叫本地环境,这个二咱们先不解释,咱们后面再说啊,那么这个十呢,表示的是参数,这个咱们也后面再说,所以我们现在呢,先把咱们的这个指令咱们先执行一下。
02:22
拷贝,拷贝之后在咱们的这个位置大家看啊,我退出去,我退出去的时候,我应该指向这个叫Spark local,然后复制一下刚才的指令,然后我回车,回车之后这个时候呢,它就会把你的应用程序给它提交到本地环境中执行了,诶大家概已经执行完了,执行完以后这个派的结果已经出来了,有的同学说老师你看不对呀,咱们小时候背的那个圆周率呢,3.1415926,你这怎么这么多呀,对不对?我告诉大家,这个不关心,咱们只关心环境能不能够用,程序能不能执行,你到底这个派的计算结果就跟咱们没有关系了,这个是18UG自带的那个案例,这个咱们暂时不管它好不好。
我来说两句