首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >我们能拆分一个大HDFS文件夹吗?

我们能拆分一个大HDFS文件夹吗?
EN

Stack Overflow用户
提问于 2015-11-17 18:16:47
回答 1查看 212关注 0票数 0

我有一个hdfs文件夹大小约570 TB,有几个子文件夹,我想分裂一个子文件夹,大约530 TB。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2015-11-17 18:49:38

您可以使用hadoop fs -mv (Move)命令来实现相同的目标。

例如,让我们假设,您有以下文件夹结构:

代码语言:javascript
运行
复制
/tmp/1GB/
/tmp/2GB/
/tmp/3GB/

现在,您希望将/2GB//tmp/中分离出来,并将其移动到/ (根文件夹)下。

你所要做的就是:

hadoop fs -mv /tmp/2GB /

现在文件夹结构将是:

代码语言:javascript
运行
复制
/2GB/
/tmp/1GB/
/tmp/3GB/

而且,由于move只是一种元数据操作,因此执行它的成本并不高,而不是copy操作。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/33764193

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档