使用copyToLocal从HDFS拷贝的路径
使用copyToLocal从HDFS拷贝的路径
提问于 2018-06-08 05:02:02
我正在尝试从HDFS复制，当我运行此命令时，什么也没有发生。
hadoop fs -copyToLocal out1 ~/datatemp我假设我应该为HDFS文件包含一个更长的路径- out1是存储在HDFS上的目录，而~/datatemp是本地磁盘上的目标目录。我做得对吗？为什么~/datatemp中没有显示任何内容？我如何知道out1的完整路径
我也试过
hadoop fs -get out1 ~/datatemp回答 2
Stack Overflow用户
发布于 2018-06-08 05:39:21
要将整个out1 HDFS目录复制到本地磁盘：
hadoop fs -copyToLocal /hdfs/path/to/out1 ~/datatemp要复制out1 HDFS目录中的文件，例如file1.txt：
hadoop fs -copyToLocal /hdfs/path/to/out1/file1.txt ~/datatemp要复制out1 HDFS目录中的所有文件：
hadoop fs -copyToLocal /hdfs/path/to/out1/* ~/datatemp要查找out1目录在HDFS上的位置，您可以列出并搜索：
hadoop fs -ls -R / | grep out1Stack Overflow用户
发布于 2019-12-15 20:54:31
对于使用不同版本Hadoop的用户，您可以使用hdfs dfs。
如下所示：
hdfs dfs -get hdfs:/path/to/hdfs/directory /home/local/directory页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/50750098
复制相关文章
相似问题