00:00
好,接下来呢,我们讲一下这个压缩参数的一个配置。参数一配置,那在说这个压缩参数配置的时候呢,我们稍微回顾一下这个上节课啊讲的内容,那就说map和reduce这两个阶段是。都可以采用这个压缩呀。就是在那之前。采压缩,在它这个map之后可以采用压缩,在reduce之后也可以采用压缩。啊,这么几个位置都可以享受压缩。那么下面就是,那么如何配置。这个参数才能使这个map和reduce在任意阶段。你说是能,那他具体参数如何实现呢来看。呃,这呢是要在还还洞中启用压缩,可以配置如下参数。比如说第一个。第一个呢,是这个。I啊,压缩的这个。啊,然后这个呢,是这个配置文件当中。
01:01
这个默认值呢,其实它是一个。空啊啊是一个空。啊,但是呢,它系统本身的支持的这个。呃,压缩格式包括default。这个还有B,这个two。那这个呢,这个参数是控制什么呢?控制是输入阶段的。也就是在这个。哎,在这几个你传过来这个数据如果是压缩的。那我可以自动的对你进行一个压缩处理。那么你这个压缩的是什么样的格式,比如说是。的,那我拿过来就可以用啊,或者你是G的也可以拿过来用。但如果你是拉格罗。能不能直接用呢?哎,不能用,你需要配置这个参数,在这个后面加上拉着螺箱的这个。假设方式。那前提是你得拉出安装哈,啊得。这个地方呢,就是啊,要注意。
02:00
啊,你要能解压哪种数据,那你需要配置。具体不给大家演示了啊啊,这是在输入阶段啊。这一个参数就搞定了。那么下边呢,就是。如果我想配置这个数据,在map的输出阶段。那怎么办呢?这么。看一下map,就是map。你这map阶段的输出是。家说的,那它的默认值是。也是输出阶段,他把那个压缩给。掉了啊,这是默认值,那如果你把它变成处。那你说在输出的时候,脉搏输出。就开启了。那map是这个map out food。这是com of,这个也就是说你要采取了压缩。用的哪种压缩?
03:03
那这个要注意啊。这地方是设定你到底采用哪种。进行一个压缩。这个是一个是开启,一个是。后面呢,我们都会针对呃,包括这个输入和这个map啊以及。后面这个reduce都有相的案例哈。那下面呢,这个是级的。你六阶段是什么呢?在你输出的时候,这个文件是否压缩,第一个是是否压缩是。那就将它改成住。那么另一个呢是你到底采用哪种压缩形式是。是吧?伽罗S啊。那这里面有三个参数啊。第一个参数是out不out,你说是否开启这个?压缩功能。默认值是false。
04:00
要将它改成。另一个呢,是这个out out啊,这是扣袋。那你说他具体的压缩编码。默认值,那是。一般呢,我都对他进行一个修改啊,那这两个那同时呢,它还有一个。叫卖本六,Output out。就是type类型。这个type类型的默认值叫。那它这里面可选的还有什么呢?一个是那一个是。就是输出的时候,你这个压缩是按行。还是啊。那你说哪个效率高呢?说肯定是块啊,啊一大块是不放在一压缩,那你这一行压缩是不是这个效率很低呀,比说这个执行梳理。是很频繁啊,不断的在压缩,但是这个呢块整个一级啊压缩。会高一些啊,这个呢,其实也是提高呃,压缩的一个手。
05:04
办法。好,这是这么多参数。后面呢,我马上啊,介绍一下这些参数的一个具体的使用啊。
我来说两句