前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Sqoop 压缩

Sqoop 压缩

原创
作者头像
ZHANGHAO
修改2019-01-23 12:06:41
1.1K0
修改2019-01-23 12:06:41
举报
文章被收录于专栏:张浩的专栏张浩的专栏

Sqoop 作业的输出可以直接压缩。Sqoop 作业是一个MapReduce作业, 因此通过设置MapReduce压缩编解码器, 可以得到 Sqoop 的输出压缩。

只需将参数放到 Sqoop 命令字符串中即可。

--compression-codec <compression codec>

snappy压缩

--compression-codec org.apache.hadoop.io.compress.SnappyCodec

Gzip压缩

--compression-codec org.apache.hadoop.io.compress.GzipCodec

Bzip压缩

--compression-codec org.apache.hadoop.io.compress.BZip2Codec

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档