首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >HDFS特性及缺点分析(3)

HDFS特性及缺点分析(3)

作者头像
大数据梦想家
发布2021-01-22 16:07:34
发布2021-01-22 16:07:34
1.4K0
举报

因为在前面几期的分享中,大家看到的更多是HDFS的底层原理,内部结构,并没有谈到其自身优势和劣势的一个比较!因此,本次小菌为大家带来的就是HDFS的特性以及缺点分析。

HDFS特性

关于HDFS的特性,相信从系列1《HDFS文件系统介绍(1)》开始,大家就对HDFS产生了浓厚的兴趣。虽然在前面我们也或多或少的提到了一些它的用途。但如果精炼概况HDFS的特性,大致要分为下面3点:

1、海量数据存储: HDFS可横向扩展,其存储的文件可以支持PB级别数据。 2、高容错性:节点丢失,系统依然可用,数据保存多个副本,副本丢失后自动恢复。 可构建在廉价(与小型机大型机比)的机器上,实现线性扩展(随着节点数量的增加,集群的存储能力,计算能力随之增加)。 3、大文件存储:HDFS采用数据块的方式存储数据,将一个大文件切分成多个小文件,分布存储。

HDFS缺点

当然,HDFS看着功能这么"强大",也无法避免自身存在的一些"缺陷"。HDFS的缺点大致有如下几点:

1、 不能做到低延迟数据访问: HDFS 针对一次性读取大量数据继续了优化,牺牲了延迟性。 2、不适合大量的小文件存储 : A:由于namenode将文件系统的元数据存储在内存中,因此该文件系统所能存储的文件总数受限于namenode的内存容量。 B:每个文件、目录和数据块的存储信息大约占150字节。 由于以上两个原因,所以导致HDFS不适合大量的小文件存储 3、文件的修改; 不适合多次写入,一次读取(少量读取) 4、不支持多用户的并行写

本次的分享就到这里了,小伙伴们有什么疑惑或好的建议可以积极在评论区留言,小菌后续还会推出HDFS系列的其他内容,希望大家持续关注小菌ヾ(๑╹◡╹)ノ"

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019/11/05 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • HDFS特性
  • HDFS缺点
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档