腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
python和Hadoop -使用Python直接获取和写入数据到
hdfs
?
、
这些价格应该直接存储在
HDFS
文件中。因此,我并不是在寻找基本的map-还原,因为我没有任何这样的输入文件。
浏览 4
提问于2015-08-06
得票数 1
1
回答
错误:找不到流jar
、
每当我运行以下代码从分布式文件系统(
hdfs
)将.csv文件下载到本地系统时,我都会得到以下错误 dumbo cat <
hdfs
path for .csv
浏览 6
提问于2016-01-18
得票数 0
1
回答
在
hdfs
上保存Keras模型
、
、
、
我们公司的云服务器只允许我们将文件保存到
hdfs
。是否有方法在
hdfs
上保存Keras模型。我试过model.save,但它不起作用。
浏览 0
提问于2019-10-12
得票数 1
2
回答
Hadoop文件系统中目录的路径是什么?
、
、
、
、
最近我开始学习Hadoop和Mahout。我想知道Hadoop文件系统目录中目录的路径。<property> <value>/Users/Li/File/Java/hdfstmp</value></property>
浏览 1
提问于2013-11-13
得票数 13
1
回答
需要帮助从help查询
HDFS
、
、
、
我在我的笔记本电脑中启动了
HDFS
,并看到我可以在
HDFS
中查询csv和json文件。现在我想查询另一台笔记本中的文件。因此,我在另一台笔记本上启动了
hdfs
,当我给出select *查询时,它失败了(尽管我可以执行show files查询而没有问题)。我所得到的错误在dropbox链接中: Apache演练版本: 1.1.01)是否有可能在hadoop集群外的机器上运行钻取程序并查询集群中的
hdfs
浏览 3
提问于2015-08-20
得票数 0
1
回答
命令行
中的
HDFS
I/O统计数据
、
、
、
有没有任何方法获得hadoop/
hdfs
集群的i/o stat(即总读I/O、写i/o)?可能是类似于
Linux
中的iostat?我知道有一种方法可以在webUI中查看stat。http://<namenode_host>:50070/jmx 但是我需要访问
命令行
中的stat。有任何方法可以在
命令行
中获取webUI内容吗?或者其他工具?
浏览 4
提问于2021-04-08
得票数 0
2
回答
Hadoop:
hdfs
-text的倒数
、
、
、
在Hadoop中,
hdfs
dfs -text和
hdfs
dfs -getmerge命令允许从
命令行
轻松读取
HDFS
中压缩文件的内容,包括连接到其他命令进行处理(例如wc -l <(
hdfs
dfs -这些命令是否相互对应,允许将内容从
命令行
()推送到
HDFS
,同时支持与上述命令相同的压缩和格式特性?
hdfs
dfs -put似乎只是将本地文件的原始副本复制到
HDFS
,而不需要压缩或容器格式的更改。 建议使用
命令行</e
浏览 4
提问于2016-03-15
得票数 1
回答已采纳
1
回答
hadoop如果我使用-files
命令行
选项,如何在映射器中获取分发缓存文件
、
map red作业并将作业提交给运行hadoop的
linux
我知道此分发缓存文件将发送到我的远程计算机上的
HDFS
(我说的对吗?)此外,我尝试手动将junkwords.txt文件复制到
hdfs
,并在
命令行
中将
hdfs
路径指定为 java -jar XMLDriver.jar -files /users/junkwords.txt当使用-f
浏览 2
提问于2013-10-25
得票数 1
1
回答
将文件从haddop集群(远程windows机器)上传到
hdfs
,就像hue上载一样
、
、
我正试图找到一种解决方案,将文件从本地windows机器或本地
linux
机器复制到云上的
hdfs
。我知道一个解决办法 节点->
hdfs
(使用
hdfs
命令)
hdfs
文件:://<‘本地-主机’>:<‘本地-路径’>
hdfs
://
浏览 2
提问于2016-06-17
得票数 0
2
回答
使用星火-从EMR机群主服务器外部提交
、
、
、
denied: user=jungd, access=WRITE, inode="/user/jungd/.sparkStaging/application_1466437015320_0014":
hdfs
:hadoop:drwxr-xr-xat org.apache.hadoop
浏览 1
提问于2016-06-22
得票数 0
回答已采纳
1
回答
在运行时模拟用户以进行spring配置
、
、
我有一个web应用程序,它接收来自不同用户的、从
linux
命令行
运行的其他几个应用程序的请求。对于每个请求,我必须从
hdfs
中读取数据,以调用应用程序文件夹,该文件夹仅供调用的应用程序
linux
用户访问。
浏览 2
提问于2013-11-18
得票数 0
回答已采纳
2
回答
hadoop2在没有yarn和mapreduce的情况下构建
hdfs
、
、
根据一篇发表的论文,我想对hadoop
hdfs
做一些修改。在那之后,我只需要构建
HDFS
并让它运行。我该怎么做呢?
浏览 2
提问于2014-04-14
得票数 1
7
回答
在人类发展战略中是否有相当于“
hdfs
”的内容?
、
我试着做
hdfs
dfs -pwd,但是这个命令不存在。因此,目前我诉诸于做
hdfs
dfs -ls ..,然后是
hdfs
dfs -ls ../..。我还查看了
hdfs
dfs的命令清单,但没有看到任何看起来很有希望的东西。 有更直接的方法找到绝对路径吗?
浏览 4
提问于2014-02-03
得票数 32
回答已采纳
1
回答
HDFS
分块
、
根据这一理论,当一个文件被复制到
HDFS
文件系统中时,它将被分割为128 MB块。然后将每个块复制到不同的数据节点中,然后复制到数据节点中。问题: 当我将数据文件(~500 MB)从本地文件系统复制到
HDFS
(put命令)时,
HDFS
(-ls命令)中仍然存在整个文件。我本来想看到128 MB的块。我在这里做错什么了?如果假设我设法在
HDFS
中拆分和分发数据文件,是否有一种将原始文件组合并检索回本地文件系统的方法?
浏览 3
提问于2015-05-20
得票数 3
回答已采纳
1
回答
在hadoop 2.7.2中无法连接slave1 1:8088
我是hadoop的新手,我已经将Hadoop2.7.2安装在两台机器上,这两台机器是Masterandslave1。我跟踪了。本教程中没有提到这一点,但我也在hadoop-env.sh中编辑了JAVA_HOME和HADOOP_CONF_DIR变量。最后,我安装了两台机器hadoop。在主NameNode中,DataNode、SecondaryNameNode、ResourceManager和NodeManager在运行,而在slave1中,DataNode和NodeManager在运行。 我可以在浏览器中转到master:8088,当我转到时,这里只有主节点。我不能去isci17:8088,那
浏览 1
提问于2016-11-23
得票数 0
回答已采纳
1
回答
如何将文件从本地磁盘传输到Cloudera虚拟机?(我已经查过了,但什么也没找到)
、
、
、
获取一个简单的.txt文件并将其传输到cloudera中的
hdfs
目录中。 但没那么走运。任何帮助或指导都将不胜感激。
浏览 40
提问于2017-02-16
得票数 0
回答已采纳
1
回答
cc机箱无法找到libjvm.so,即使它是通过RUSTFLAGS='-L‘提供的
、
unknown-
linux
-gnu/lib/rustlib/x86_64-unknown-
linux
-gnu/lib/libterm-1d56ea45a67842c8.rlib" "/usr/local/rustup/toolchains/1.54.0-x86_64-unknown-
linux
-gnu/lib/rustlib/x86_64-unknown-
linux
-gnu&
浏览 85
提问于2021-09-01
得票数 0
回答已采纳
4
回答
直接在
HDFS
中生成文件
、
、
有没有办法直接在
HDFS
上生成文件?我想避免生成一个本地文件,然后通过
HDFS
命令行
:
hdfs
dfs -put - "file_name.csv"复制到
hdfs
。 或者有没有python库?
浏览 5
提问于2016-01-11
得票数 2
1
回答
将本地
HDFS
文件系统浏览器与IntelliJ IDEA集成
、
、
、
所以在这个集群中,我需要: 我知道通过访问
HDFS
是可能的,但这是非常
浏览 2
提问于2018-01-22
得票数 0
回答已采纳
2
回答
hadoop-2.7.2中缺少/user目录
我的.bashrc文件的内容如下:
hdfs
-site.xml文件的内容如下:
浏览 0
提问于2017-01-03
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
linux系统命令行
3.2 Linux 命令行
Linux 预设命令行——Bash
通过 Linux 命令行连接 Wifi
Linux命令行文本工具
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券