首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >如何访问Hadoop -D参数

如何访问Hadoop -D参数
EN

Stack Overflow用户
提问于 2022-02-15 03:32:06
回答 2查看 30关注 0票数 0

这是命令:

代码语言:javascript
运行
复制
hadoop jar PopularityLeague.jar PopularityLeague -D league=dataset/league.txt

如何访问Hadoop中的'league=dataset/league.txt‘?

我搜索了这个问题,有人说我可能会使用配置来完成它。我不知道我怎么能做到。

EN

回答 2

Stack Overflow用户

发布于 2022-02-15 04:53:04

注意:我只回答如何使用-D选项来更改以下命令中的复制因子,同时使用-D将数据存储到HDFS。

代码语言:javascript
运行
复制
hdfs dfs -Ddfs.replication=1 -put /data/dpq/dummy/temp/GDGA111_1_20180918111340752.csv /data/dpq/temp

你能试试类似的线路吗?

票数 0
EN

Stack Overflow用户

发布于 2022-02-15 14:07:02

我需要在java文件中使用"dataset/league.txt“

如果您查看一些示例mapreduce程序,它们可能在main方法中包含new Path(args[0])

该命令调用将如下所示,而不使用系统属性

代码语言:javascript
运行
复制
hadoop jar PopularityLeague.jar PopularityLeague dataset/league.txt
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/71120822

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档