2回答
我有一个远程服务器和经过身份验证的Hadoop环境。 我想将文件从远程服务器拷贝到Hadoop计算机，再拷贝到HDFS 请建议使用有效的方法/ HDFS命令将文件从远程服务器复制到HDFS。通常将文件从远程服务器复制到服务器本身的
浏览 48提问于2020-07-07得票数 1
我需要将文件从远程Linux服务器直接传输到HDFS。我在远程服务器上放置了keytab，在kinit命令激活后，我无法浏览HDFS文件夹。我知道从边缘节点我可以直接将文件复制到HDFS，但是我需要跳过边缘节点，直接将文件传输到HDFS。
我们怎样才能做到这一点。
浏览 1提问于2018-09-26得票数 0
1回答
我想使用sftp将文件从远程服务器直接复制到hdfs位置，而不是将文件复制到本地。hdfs位置是一个安全的群集。请建议这是否可行，以及在这种情况下如何进行。
浏览 3提问于2014-09-04得票数 1
1回答
我有一个将最新生成的HDFS文件复制到linux远程服务器的用例。我不想将中间件存储在本地文件系统中，然后对远程服务器执行scp。我知道这一点，但我想避免这种情况(原因很明显--在本地文件系统中存储大量文件的开销) hadoop fs -copyToLocal <src> <dest>
and then scp toMyLinuxFileSystem是否有直接将hdfs<em
浏览 56提问于2019-06-25得票数 1
1回答
我想直接将文件从本地Linux机器复制到远程HDFS集群，也就是说，我不希望将文件复制到远程计算机，然后使用copyfromlocal命令将其移动到HDFS。cat sample.txt | ssh -tt root@MY_HDFS_CLUSTER "sudo -u hdfs hdfs dfs -put - /user/myuser/data
浏览 2提问于2014-04-09得票数 0
如何从远程Unix和Windows服务器将文件复制到HDFS，而无需从命令行进行中间转移？
浏览 5提问于2015-05-29得票数 2
从Windows复制到远程HDFS的正确语法是什么？我试图使用RStudio将文件从本地计算机复制到远程hadoop集群这个扔了rxHadoopCopyFromLocal("C:\\pa
浏览 6提问于2017-05-23得票数 0
回答已采纳
我想实现一个SSIS作业，它能够下载位于远程Hadoop集群上的大型CSV文件。当然，在Hadoop系统上只有一个常规的FTP服务器不会公开HDFS文件，因为它使用本地文件系统。我想知道是否有基于HDFS的FTP服务器实现。我更喜欢这种方法，而不是必须将文件从HDFS复制到本地文件系统，然后让FTP服务器提供此服务，因为我将需要分配更多的存储空间
浏览 9提问于2017-12-14得票数 1
回答已采纳
2回答
希望将文件从远程服务器复制到hadoop，而不复制到边缘节点。但我正在寻找第三个选项，在那里我们可以scp而不是ssh CAT，并复制到hadoop而不复制到Edge
浏览 56提问于2020-02-21得票数 0
回答已采纳
我在本地hdfs环境中有一个目录，我想将它复制到我的本地计算机。我使用ssh (带有密码)访问hdfs。
我尝试过许多建议的复制命令，但都没有工作。
浏览 2提问于2018-05-09得票数 1
回答已采纳
2回答
Hadoop文档说-PUT-拷贝单个src，或者从本地文件系统复制多个srcs到目标文件系统。我试过但没成功..。
请帮帮忙，我是Hadoop的新手
浏览 5提问于2015-03-31得票数 0
回答已采纳
我希望将文件从Hadoop集群复制到远程集群。我知道远程名称节点的IP和端口。我想按下面的ex格式通过名称空间复制该文件。hadoop -cp hdfs://MyNamespace/path/file hdfs://RemoteNamespace/
浏览 1提问于2018-04-20得票数 0
回答已采纳
我正在处理大数据，并希望从远程计算机中的文件系统(而不是从任何数据库)获取数据/文件，即将文件从远程linux / windows机器复制到hdfs。请帮帮我。
浏览 2提问于2016-10-12得票数 1
回答已采纳
2回答
我正在尝试将所有部件*文件从一个目录直接从HDFS dir传输到sftp服务器。hdfs文件夹中的所有文件都很大，所以我不想将它们复制到本地文件系统中。当前设置为
curl "<sftp_username>:" --key &q
浏览 8提问于2021-11-22得票数 0
1回答
我需要编写一个脚本，将内容从远程服务器复制到本地计算机。虽然有很多方法可以做到这一点，但由于服务器属于不同的集群(一个被截断了另一个不属于另一个)，我的同事建议我使用一个简单的bash脚本将数据从远程位置流式传输到本地机器(在本地机器上，数据将被流式传输到hdfs下面的代码适用于第一次迭代，创建一个目录，一个正确命名的文件，并向其中添加正确的内容。但是，它会在第一个文件之后停止(在此测试场景中，有三个名为a、b和c的
浏览 0提问于2021-04-01得票数 0
我想写一个基于SolrJ的java客户端，它将整个核心数据从远程Solr服务器拉到一个文件中。稍后，我想将此文件重放到另一个远程Solr服务器内核。
实现此功能的最佳方法是什么？
浏览 0提问于2012-12-19得票数 3
回答已采纳
我还没有在我的Linux文件系统上安装hadoop。我希望运行hadoop并将文件从local file system复制到HDFS，而无需在我的Linux文件系统上安装hadoop。Configuration configuration = new Configuration();
FileSystem fs = FileSystem.get(new URI("hdfs/part-m-00000"), new Pa
浏览 8提问于2015-04-24得票数 1
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
