我有一个将最新生成的HDFS文件复制到linux远程服务器的用例。我不想将中间件存储在本地文件系统中,然后对远程服务器执行scp。我知道这一点,但我想避免这种情况(原因很明显--在本地文件系统中存储大量文件的开销) hadoop fs -copyToLocal <src> <dest>
and then scp toMyLinuxFileSystem是否有直接将hdfs文件复制到远程<
我正在寻找一种简单的方法来检查远程路径是指向一个目录(或一个符号链接的目录)还是指向一个可读的文件。如果它是一个目录,那么我可以从该目录中将多个特定文件scp到我的本地系统,而如果它是一个文件,则只能scp该文件。我在scp-manner中将文件路径指定为user@host:/path/to/dir-or-file。注意:在本地系统(MobaXterm On Windows)上,我可以使用bash、<em