我的Java代码中有一些hadoop文件系统操作(例如：hdfs mkdir)。当我尝试使用java -cp运行java程序时，在linux本地文件系统中创建了目录。因此，我使用hadoop jar命令运行程序，并在hdfs中创建了目录。现在我计划使用hadoop jar命令来运行整个java程序。我想知道使用hadoop jar命令会不会有问题，特别是当从本地文件夹读取文件或执行下面的Runtime.getRuntime().exe
浏览 2提问于2017-05-29得票数 0
我使用Python代码在Linux (Cloudera)机器上使用SSH运行Hadoop程序。
我在将java文件编译成类文件时遇到了一些困难。当我从Linux终端执行命令：javac -cp /usr/lib/hadoop/*:/usr/lib/hadoop/client-0.20/* remote_hadoop/javasrc/*时，所有
浏览 0提问于2014-12-19得票数 0
回答已采纳
目前，我的应用程序在Linux上使用带有MONO的C#来与本地文件系统(例如ext2、ext3)通信。基本操作包括打开文件、对文件进行写/读和关闭/删除文件。我的问题是:如果我在Linux机器上安装Hadoop文件系统。然后，我需要对现有函数进行哪些更改，以便它们与hadoop文件系统通信，以便对文件执行基本操作。由于Hadoop基础设施是基于Java的，所以任何C# (在linux上使用MONO )应用程序将如何
浏览 3提问于2010-01-11得票数 3
我试过这段代码：[search path for source files: /var/root/hadoop-1.0.4/hadoop-1.0.4-core.jar]WordCount.jav
浏览 3提问于2013-03-14得票数 2
回答已采纳
1回答
我必须将自定义Linux应用程序的输出提供给Hadoop，而Amazon EMR似乎是一个很好的实验方法。我真的刚刚开始研究Hadoop和Amazon文档，所以一些建议将不胜感激……谢谢。
浏览 0提问于2013-10-02得票数 0
我正在学习Hadoop (2.7.1)。我正在Ubuntu (15.04)上配置它，并为Hadoop创建了一个单独的用户，以将Hadoop文件系统与Linux文件系统隔离开来。但是，当我试图在这个hadoop用户下使用sudo时，我会得到一个错误：
这个用户应该在sudoers文件中吗？在哪种情况下，我应该在hadoop和root用户下工作？
浏览 6提问于2016-07-18得票数 0
回答已采纳
在相关信息可以被obtained.Is之前，需要一个可执行文件来处理文件。实现这一点的最好方法是什么？
浏览 2提问于2011-02-26得票数 1
如何使用本地Windows Box上安装的Apache Nifi实例连接到安装了Hadoop的远程Linux节点？另外，如何使用这些Nifi本地实例在安装了Hadoop的远程Linux节点上执行数据迁移活动？我已经在这些远程Hadoop集群上启用了Kerberos。
浏览 0提问于2017-02-27得票数 0
2回答
我基本上是一个mysql的家伙，是hadoop的新手，试图通过sqoop和下面的命令在我的hadoop系统上导入一个mysql表，但得到了错误。我在网上搜索，但没有得到任何可能的解决方案。-jvm1.2.jar-rwxr-xr-x 1 hduser hadoop 167KAug 1 2014 avro-mapred-1.7.5-hadoop2.jar
-rwxr-xr-x 1 hd
浏览 1提问于2015-02-25得票数 0
回答已采纳
我正在尝试从运行简单的yarn应用程序。但是我在我的应用程序错误日志中得到了以下异常。//*:/usr/lib/hadoop-hdfs/./:/usr/lib/hadoop-hdfs/lib/*:/usr/lib/hadoop-hdfs/.//*:/usr/lib/hadoop-y
浏览 3提问于2014-05-05得票数 2
回答已采纳
我有一个Hadoop FileSystem，它使用带有JNI的本地库。
显然，我必须独立于当前执行的作业包含共享对象。但是我找不到告诉Hadoop/Yarn应该在哪里查找共享对象的方法。这有助于资源和nodemanager，但是实际的作业/应用程序失败了。在执行wordcount示例时打印LD_LIBRARY_PATH和java.library.path将产生以下结果。amd64:/usr/lib/x86_64-linux-gnu
浏览 5提问于2015-08-03得票数 2
回答已采纳
2回答
我是Hadoop新手，在Ubuntu 18.10中第一次设置了我的环境tar -xvf jre-8u101-linux-i586.tar.gz
tar -xvf hadoop-2.7.3.tar.gz=$HADOOP_HOME/etc
浏览 0提问于2019-05-08得票数 0
我是hadoop的新手。我最近在ubuntu 14.04操作系统上安装了Apache Hadoop 2.7.2的稳定版本。我正在尝试执行一些基本的Hadoop命令，如下所示该命令给出了正确的输出，如下所示。
我的.bashrc文件的内容如下：
hd
浏览 0提问于2017-01-03得票数 1
2回答
我正在学习Hadoop，并想尝试伪分布式操作/var/run/hadoop/hadoop-foo-user-namenode.pid: permission denied
/var/run/hadoop/hadoop-
浏览 7提问于2013-02-09得票数 0
我已经在我的windows7机器上设置了Hadoop 2.5.2。要求是在hadoop上加载平面文件，处理平面文件上的数据，并从中呈现报告。确定的技术是Hadoop 2.5.2、Spark和Hive。
浏览 4提问于2016-04-06得票数 1
当我设置HADOOP_HOME=/cygdrive/c/ecosystem/hadoop-2.5.1，然后尝试从Cygwin运行bin/hadoop fs或bin/hadoop -Streing.jar所以，我设置了HADOOP_HOME=c:\ecosystem\hadoop-2.5.1，这个错误消失了。但是，现在我在Cygwin中运行时会收到一个链接错误。我通过Windows用HADOOP_HOME=c:\
浏览 3提问于2014-10-02得票数 5
回答已采纳
我想要创建一个使用该代码的Hadoop映射程序。我遇到了以下解决方案，但不确定哪一种是最好的(因为在hadoop中的每个从节点上安装matlab编译器运行时对我来说非常困难)：
手动将matlab代码转换为C++中的OpenCV，并从映射器调用它的exe不确定，因为集群在每个节点上都安装了Linux，而不是Windows.使用Hadoop流。但是Hadoop流需要一个可执行文件作为映射器，而matlab的可执行程序也需要Matlab编
浏览 0提问于2012-03-31得票数 13
回答已采纳
2回答
我是Hadoop世界的新手。我将在我的PC上安装一个独立版本的Hadoop，以便将文件保存在HDFS (当然是1个节点)上，然后运行pySpark从HDFS读取文件并对其进行处理。
浏览 0提问于2017-01-11得票数 0
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
