我有一个hdfs文件夹大小约570 TB,有几个子文件夹,我想分裂一个子文件夹,大约530 TB。
发布于 2015-11-17 18:49:38
您可以使用hadoop fs -mv (Move)命令来实现相同的目标。
例如,让我们假设,您有以下文件夹结构:
/tmp/1GB/
/tmp/2GB/
/tmp/3GB/现在,您希望将/2GB/从/tmp/中分离出来,并将其移动到/ (根文件夹)下。
你所要做的就是:
hadoop fs -mv /tmp/2GB /
现在文件夹结构将是:
/2GB/
/tmp/1GB/
/tmp/3GB/而且,由于move只是一种元数据操作,因此执行它的成本并不高,而不是copy操作。
https://stackoverflow.com/questions/33764193
复制相似问题