在Hadoop项目目录中bin目录在哪里？

文章/答案/技术大牛

发布

1回答

hadoop

我一直在关注官方和DigitalOcean的文档(教程)，但我不能跟随他们的领导。它们都建议编辑一个文件，并在编辑后运行Hadoop : dist目录中的etc/hadoop/hadoop-env.sh。我无法在最新的稳定版本以及2.7.7版本的整个解压目录中找到这样的文件 etc/hadoop/hadoop-env.sh在哪里？

浏览 37提问于2019-02-18得票数 0

3回答

如何使用java中的eclipse在Windows上本地运行Spark

hadoop、apache-spark、apache-spark-mllib

我想使用eclipse在windows上本地运行他们的java示例。我已经下载了Spark1.3.1预构建的Hadoop2.6。当我尝试运行示例代码时，我得到：java.io.IOException: Could not locate executable null\bin\winutils.exe in the <e

浏览 1提问于2015-06-11得票数 2

4回答

我正在尝试运行作业(我正在使用Hadoop2.6.0)。当我将我的项目导出到runnable并从CLI运行它时，它可以工作。但是，当我在Eclipse中以"Run应用程序“启动它时，我会收到以下异常： org.apache.hadoop.conf.Configuration.WordCount.main(WordCount.java:54)上的java.lang.NoClassDefFoundError: org/apache/commons/LogFactory

浏览 3提问于2015-08-14得票数 1

1回答

SBT项目java.io.FileNotFoundException:FileNotFoundException: HADOOP_HOME unset

scala、hadoop、sbt

and hadoop.home.dir are> org.apache.hadoop.util.Shell.getWinUtilsPath<init>(RawLocalFileSystem.java:235)...etc 它似乎给出的建议，以及我正在发现的建议，都与在您的计算机上运行Hadoop集群时如何修复这

浏览 0提问于2018-03-12得票数 1

1回答

Hadoop无法找到文件

hadoop

当我试图列出hdfs中的文件时，我没有看到文件名是listed.What是实际的文件名吗？hadoop-user@hadoop-desk:~/hadoop$ bin/hadoop dfs -put /home/hadoop-user/googlebooks-eng-all-1gram-20120701-0 /user/prema hadoop-user@hadoop

浏览 0提问于2014-11-19得票数 0

回答已采纳

1回答

有3个datanode正在运行，在此操作中不排除任何节点。

hadoop、nutch

这个错误一直在我的hadoop爬虫中被抛出。在所有节点上都有足够的空闲空间。我不知道如何继续下去。完全错误是： Error: org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /crawl/segments/20170211181653at org.apache.hadoop.hdfs.server.blockmanagement.BlockManager.chooseTarget4NewBlock(BlockMa

浏览 2提问于2017-02-21得票数 0

1回答

Hadoop:无法在FileSystem -site.xml中将默认核心设置为HDFS

hadoop、filesystems、hdfs

我在伪分布式模式下使用Hadoop 1.0.3。value> <property> <value>/home/administrator/hadoop我的默认FileSystem不是在core-site.xml中设置为HDFS吗？如果不是，我应该如何设置？

浏览 1提问于2013-05-23得票数 6

回答已采纳

1回答

bash: bin/hadoop:没有这样的文件或目录( ubuntu 16.04上的hadoop 2.7.3 )

linux、bash、ubuntu、hadoop、java-home

我尝试在ubuntu 16.04桌面上安装hadoop 2.7.3。build 1.8.0_91-8u91-b14-3ubuntu1~16.04.1-b14)我将bashrc中的JAVA_HOME设置为：export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-i386 export HAD

浏览 125提问于2016-09-09得票数 0

1回答

hadoop -0.20.0不能处理bin/hadoop namenode格式

multithreading、hadoop、installation、multiprocessing

在安装hadoop 时，我遵循这个链接，但随后我得到了ff。错误：$ bin/hadoop namenode-“格式”bin/hadoop<

浏览 0提问于2014-01-13得票数 0

7回答

在Hadoop中清除DFS

hadoop

如何清除Hadoop中的DFS？

浏览 0提问于2009-09-10得票数 14

1回答

如何解释Hadoop* Grep命令输出*

hadoop、grep、output

这是一个非常基本的问题，涉及在HDFS目录中运行Grep实用程序所生成的输出文件。实际上，我已经在一个简单的shell脚本中包含了grep命令，它应该在这个目录中搜索给定的字符串--它是脚本的一个参数。脚本的内容如下：set - ebin/hadoop org.apache.hadoop.ex

浏览 8提问于2018-08-03得票数 0

1回答

在Hadoop中创建的HDFS目录在哪里？

java、hdfs、hadoop2

我正在运行一个简单的，让我的脚-湿，地图减少作业，在伪分布式模式如下：它第一次运行很好，但是在第二次运行时，我得到了以下内容： Exception in thread "main" org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory hdfs://localhost:9000

浏览 0提问于2017-01-23得票数 0

回答已采纳

4回答

“纱线资源发生器”系统找不到指定的批次标签

windows、hadoop、command、hadoop-yarn、resourcemanager

我在windows 64上以伪分布式模式运行Hadoop2.7.1，无法运行纱线。我想这很可能是我当前的纱线-site.xml中的一个问题，但是找不到它是什么：<property> %HADOOP_HOME%\share\hadoop\common\*, %HADOOP</e

浏览 0提问于2017-07-06得票数 0

回答已采纳

3回答

为什么在hadoop中找不到命令？

hadoop

我正在做一个关于Ubuntu 14.04的hadoop项目。每当我给出start-all.sh或start-dfs.sh时，它都会给出命令未找到的消息。我该怎么办？

浏览 2提问于2018-06-16得票数 0

16回答

无法在hadoop二进制文件路径中找到winutils二进制文件

hadoop

启动最新hadoop-2.2版本的namenode时出现以下错误。我在hadoop bin文件夹中找不到winutils exe文件。我尝试了下面的命令$ sbin/yarn-daemon.sh start resourcemanager ERROR [main] util.Shell: Could not locate executable null\bin\winutils.exe in

浏览 3提问于2013-10-28得票数 120

2回答

为什么会说"-bash: cd: hadoop: Not a directory"？

bash、hadoop、installation

我正在尝试按照教程运行"hadoop wordcount in python“。正如在本教程中一样，当我运行此命令/usr/local/hadoop/bin/hadoop fs -put ~/count_of_monte_cristo.txt /input时，它显示为-bash:cd: hadoop: Not a directory。在教程中，它说我们需要通过在HDFS中创

浏览 0提问于2018-03-09得票数 1

2回答

将文件复制到HDFS Hadoop

bash、hadoop、hdfs、cloudera

我目前正在为我在大学的一次讲座做一个项目。任务是从下载一本书并将其复制到HDFS中。我试过使用put <localSrc> <dest>，但它根本不起作用。这是我的代码目前在终端中的样子：bash:意外标记`<‘附近出现语法错误任何帮助都是非常感谢的更新30.05.2017:我已经使用下面的链接安装了Hadoop，并且根本

浏览 0提问于2017-05-24得票数 0

1回答

当我使用hadoop* -mkdir时，我的文件(Dir)存储在哪里？*

hadoop、hdfs

所有的例子都显示了结果应该是什么，而没有解释它的真正结构，所以如果有人能帮助我理解hadoop，我会很高兴的。好的，我会用ls命令检查它。bin/hadoop fs -lsdrwxr-xr-x - hadoop supergroup 0 2012-07-30 11:08 input 好吧但是HDF

浏览 2提问于2012-07-30得票数 8

1回答

hadoop的路径变量非函数

linux、hadoop

我在以下路径中安装了hadoop : /home/myname/hadoop-2.7.2包含可执行文件"hadoop“。现在，我在.bashrc中设置了我的.bashrc变量，我做了一个回显$PATH，我得到 /usr/local

浏览 1提问于2016-03-08得票数 1

回答已采纳

1回答

Apache安装和db_metastore

apache-spark

我安装了java和spark-1.6.1-bin-hadoop2.6.tgz(我还没有安装Hadoop)，并且没有更改conf目录中的任何配置，就运行了spark-shell。在安装spark的目录中，我看到创建了另一个metastore_db，其中包含临时文件夹。为什么要创建这个metastore_db，在哪里配置的？

浏览 11提问于2016-08-25得票数 1

回答已采纳

点击加载更多