温馨提示:文本由机器自动转译,部分词句存在误差,以视频为准
00:01
上硅谷的小伙伴们大家好。那么本次课程呢,主要是针对于我们之前发布的一套视频做了一个升级,呃,那么接下来呢,我从。第一,课程内容,第二适用人群,第三前置知识,这三个方面给大家做一下本次的课程介绍,首先第一块课程内容方面我们来看一下,主要有以下五点啊,同时我会给大家说一下我们主要升级的内容有哪些,第一块主要针对于版本我们做了一个。升级之前我们发布的视频呢,是基于1.7版本的,本次课程升级到了1.9版本。第二块,在本次课程当中,我们主要对于from这个内容做了一个组件及架构的详细介绍啊,会介绍它当中整个的数据流以及事物等等。第三块针对于企业当中的常用组件,我们做了深入的剖析,以及有一些企业的真实案例做介绍与演示。
01:11
那么第四点呢,就是针对于我们整个监控工具的使用。呃,那我们学习过或者说即将要学习本次课程的同学们呢,都知道from它是一个采集数据的框架,那么在采集的过程当中,咱们from这个进程,它的内存是否够用?以及在采集过程当中,这个数据是否有丢失,那我们可以通过监控工具来达到我们的目的,那么第五点呢,就是本次升级的主要内容了啊,那第一个我们会针对于企业当中常用组件做了部分的源码阅读,甚至在我们使用一些组件的时候,针对于公司当中一些特殊的应用场景,我们做了源码的修改。
02:03
啊好,这是第一块,我们的课程主要内容包括这五点,第二个是我们所聊的叫适用人群。第一,在公司当中,目前从事数据采集工作的同学们可能会用得到,第二,在工作当中即将成为数仓工程师,同时在公司内部,咱们公司呢,可能是从零到一来实现这个整个数仓开发的啊,那我们熟悉的小伙伴应该知道,数仓主要是做海量数据的。采集、存储和计算。那么如果你们公司的数仓是从零到一的,那么第一件事情你肯定要做的是采集,那么本套视频是可以帮助到大家的。第三个就是学习本次视频的前置知识或者说是一些要求了,那么主要有两点,第一,Java基础,第二哈多基础。Java基础主要应用在我们阅读源码及修改源码方面。
03:09
因为对于form的使用,其实并不需要用到代码开发,对于form的使用呢,其实主要在于配置文件的使用就好了,那第二块哈杜基础。啊,那主要刚才我们聊到了,在试用人群当中,我们说到主要来自于数据采集和数仓工程师会用到这些点,数仓工程师呢,主要应用于我们这个数据的采集部分啊,那我们大数据工程师主要干的事情就是数据的采集存储和。分析。那我们将数据采集过来,更多的是要将它存下来,就目前市面上应用最广泛的还是哈杜的组件HDFS,作为我们存储框架的,那么所以学习本次课程呢,我们在常用的企业案例当中,我们都是将数据采集,然后上传到HDFS,所以咱们必须也得有哈杜op的一个基础才可以。
04:08
啊,那么以上呢,是我们关于本次课程的介绍。
我来说两句