腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
3
回答
对hadoop -getmerge有替代方案吗?
、
、
、
我试图使用hadoop合并将集群中的80 GB
文件
合并, 获取
hdfs
://path_in_
hdfs
/*./local_path
hdfs
://目的_<em
浏览 0
提问于2016-04-19
得票数 1
1
回答
pig无法从本地存储读取数据
、
我在pig中运行了以下命令,包括load和dump命令:我的
文件
在本地,我在独立的机器上。to open iterator for alias custs但其中存在
文件
浏览 0
提问于2016-04-21
得票数 1
9
回答
如何
将
文件
从
HDFS
复制到
本地
文件
系统
、
、
如何
将
文件
从
HDFS
复制到
本地
文件
系统。
文件
下面没有
文件
的物理位置,甚至目录也没有。我怎样才能把它们转移到我的本地进一步验证。我是通过winscp尝试的。
浏览 16
提问于2013-07-24
得票数 166
回答已采纳
2
回答
使用java
将
hdfs
文件
复制到
另一个
hdfs
位置
、
、
我需要使用Java
将
hdfs
文件
复制到
hdfs
的另一个位置。不应删除源,只想在目标
hdfs
位置复制具有新
文件
名的源
文件
。是否有任何方法可以
将
具有新名称的
hdfs
文件
复制到
源目录中?
浏览 0
提问于2014-02-17
得票数 1
回答已采纳
1
回答
如何
将
Spark集群上用Pandas编写的
文件
移动到
HDFS
?
、
、
我正在使用集群模式运行一个星火作业,并使用Pandas编写一些
文件
,我认为它是在临时目录中编写的,现在我想移动这些
文件
或在
HDFS
中编写这些
文件
。
浏览 7
提问于2021-02-16
得票数 0
回答已采纳
1
回答
HDFS
分块
、
根据这一理论,当一个
文件
被
复制到
HDFS
文件
系统中时,它将被分割为128 MB块。然后
将
每个块
复制到
不同的数据节点中,然后
复制到
数据节点中。问题: 当我
将
数据
文件
(~500 MB)从本地
文件
系统
复制到
HDFS
(put命令)时,
HDFS
(-ls命令)中仍然存在整个
文件
。我本来想看到128 MB的块。我在这里做错什么了?如果假设我设法在<em
浏览 3
提问于2015-05-20
得票数 3
回答已采纳
2
回答
如何使用JAVA API在
HDFS
中移动或复制
文件
、
我想将
文件
复制到
同一个
HDFS
中,就像
将
文件
从
HDFS
://abc:9000/user/a.txt
复制到
HDFS
://abc:9000/user/123/ 我可以使用JAVA API来做这件事吗?
浏览 0
提问于2016-07-01
得票数 5
2
回答
使用JAVA API复制
HDFS
中的目录
、
如何
将
HDFS
中的目录
复制到
HDFS
中的另一个目录?谢谢
浏览 0
提问于2012-04-12
得票数 0
回答已采纳
2
回答
我可以使用-put命令在
HDFS
中传输
文件
吗?
、
、
、
Hadoop文档说-PUT-拷贝单个src,或者从本地
文件
系统复制多个srcs到目标
文件
系统。我试过但没成功..。 请帮帮忙,我是Hadoop的新手
浏览 5
提问于2015-03-31
得票数 0
回答已采纳
1
回答
如何使用Oozie
将
远程
文件
复制到
HDFS
中?
、
、
我必须将远程
文件
复制到
HDFS
中。我想使用Oozie,因为我需要每天在特定的时间运行这项工作。
浏览 1
提问于2014-08-23
得票数 0
2
回答
Java
将
HDFS
中的
文件
复制到
HDFS
中的另一个目录
、
、
我使用这个链接中的示例
将
hdfs
中的一个目录中的内容
复制到
hdfs
中的另一个目录。
文件
的复制是可行的,但是它在目标中创建了一个新的子目录,而不是仅仅
将
文件
复制到
目标dir。示例: Path targ
浏览 4
提问于2017-05-21
得票数 5
回答已采纳
1
回答
将
文件
从本地计算机直接
复制到
远程
HDFS
集群
、
、
、
、
我想直接
将
文件
从本地Linux机器
复制到
远程
HDFS
集群,也就是说,我不希望
将
文件
复制到
远程计算机,然后使用copyfromlocal命令将其移动到
HDFS
。cat sample.txt | ssh -tt root@MY_
HDFS
_CLUSTER "sudo -u
hdfs
hdfs
dfs -put - /user/myuser/data/sam
浏览 2
提问于2014-04-09
得票数 0
3
回答
HADOOP -
将
文本
文件
复制到
HDFS
中的问题
、
、
、
我下载了/tmp/gutenberg中的
文件
,并检查它们是否存在,情况似乎是这样的:insgesamt 3604copyFromLocal: `/user/hduser/gutenberg': No such file or directory 显然没有
文件
如果我检查
文件</e
浏览 2
提问于2015-05-07
得票数 1
回答已采纳
4
回答
hadoop、-put和hadoop的区别
我们将在我们的数据湖项目中完成摄入阶段,在我的Hadoop开发经验中,我主要使用了hadoop fs -put。那么,hadoop distcp和用法有什么区别呢?
浏览 1
提问于2017-03-30
得票数 7
回答已采纳
1
回答
如何
将
Pig存储位置设置为其他hadoop群集
、
、
我正在通过REST API运行PigScript,并且我想将我的Pig输出存储到另一个hadoop集群.Is中,在那里我
将
PigStorage设置为其他一些
hdfs
。
浏览 1
提问于2015-07-02
得票数 0
2
回答
SQOOP导入失败,
文件
未找到异常
、
ubuntu机器和任何vm,我的每个安装都在不同的目录上):- 通过查看错误,我试图解决它,因此我
将
sqoop(本地机器/usr/local/sqoop)
文件
夹
复制到
目录(
hdfs
://localhost:54310/usr/local/sq
浏览 2
提问于2016-07-02
得票数 0
回答已采纳
1
回答
在
复制到
HDFS
时忽略输入
文件
中的第一行/最后一行的Hadoop命令
、
我在Linux中有一个输入
文件
,它有一个头
文件
。我无法修改此
文件
,因为只有只读访问该
文件
。在
将
文件
从Linux
复制到
HDFS
时,还有其他方法
浏览 2
提问于2017-09-18
得票数 0
回答已采纳
1
回答
Hadoop
文件
系统拷贝- namenode与datanode
、
、
、
我需要将
文件
从我的
文件
系统
复制到
HDFS
中,下面是我在
hdfs
-site.xml中的配置。如何使用hadoop fs命令
将
/home/text.txt中的
文件
复制到
HDFS
中?我应该把它
复制到
namenode还是datanode?/property> <name>dfs.namenode.name.dir</na
浏览 0
提问于2015-06-19
得票数 0
2
回答
Hadoop -cp,说
文件
不存在?
、
、
new.txt
文件
是可以使用的;我不知道为什么当我试图进入
hdfs
目录时,它说
文件
不存在。new.txtdeepak@deepak:~/fs$ hadoop fs -cp $HOME/fs/new.txt $HOME/
hdfs
cp: File does not exist: /home/deepak/fs/new.txt deepak@deepak:~/fs$
浏览 0
提问于2014-03-19
得票数 3
回答已采纳
1
回答
如何以不区分大小写的方式
将
文件
复制到
HDFS
、
、
、
、
我必须将某些CSV
文件
复制到
ABCDWXYZ.csv格式的
HDFS
,即。PERSONDETAILS.csv和我必须将其
复制到
名为AbcdWxyz viz PersonDetails的
HDFS
目录中。现在的问题是,我没有确切的
HDFS
目录名,我从CSV
文件
中获得它,然后对它进行修整并启动put。Hadoop fs -put $localRootDir/$Dir/*.csv $HDFSRootDir/$Dir 但是它抛出一个错误,因为
H
浏览 6
提问于2015-09-18
得票数 0
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券