腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
闵开慧
专栏作者
举报
237
文章
384452
阅读量
51
订阅数
订阅专栏
申请加入专栏
全部文章
hadoop
java
其他
ubuntu
云数据库 SQL Server
eclipse
数据库
apache
jdk
php
linux
hive
windows
centos
hbase
mapreduce
sql
django
编程算法
存储
jvm
jquery
shell
python
xml
html
windows server
安全
svn
tomcat
分布式
大数据
jsp
json
ajax
yarn
缓存
spark
ssh
javascript
servlet
css
struts
maven
spring
开源
grep
kerberos
struts2
bash
.net
scala
node.js
android
ide
api
unix
人工智能
express
运维
正则表达式
yum
dns
jdbc
hashmap
tcp/ip
rabbitmq
数据处理
https
nat
云计算
for循环
table
搜索文章
搜索
搜索
关闭
hadoop压缩与解压
hadoop
存储
数据处理
1 压缩 一般来说,计算机处理的数据都存在一些冗余度,同时数据中间,尤其是相邻数据间存在着相关性,所以可以通过一些有别于原始编码的特殊编码方式来保存数据, 使数据占用的存储空间比较小,这个过程一般叫压缩。和压缩对应的概念是解压缩,就是将被压缩的数据从特殊编码方式还原为原始数据的过程。 压缩广泛应用于海量数据处理中,对数据文件进行压缩,可以有效减少存储文件所需的空间,并加快数据在网络上或者到磁盘上的传输速度。在Hadoop中,压缩应用于文件存储、Map阶段到Reduce阶段的数据交换(需要打开相关的选项)等情
闵开慧
2018-03-30
1.6K
0
没有更多了
社区活动
Python精品学习库
代码在线跑,知识轻松学
点击查看
【玩转EdgeOne】征文进行中
限时免费体验,发文即有奖~
立即参加
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·干货材料·成员作品·最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档