我所要做的就是使用Java以编程方式在HDFS中创建一个目录。我得到了这个错误。: com.amazonaws.AmazonServiceExceptionpackage tas.module1;
import java</em
浏览 18提问于2017-02-18得票数 0
嗨，我对hadoop很陌生，并试图在hdfs中创建名为twitter_data的目录。我已经在softlayer上设置了vm，并成功地安装和启动了hadoop。这就是我想要得到的赞扬：
浏览 0提问于2016-10-20得票数 34
回答已采纳
我已经在Ubuntu Linux15.04上安装了Hadoop2.6，并且运行良好。path does not exist: hdfs://localhost:54310/user/hduser/input.以下是该错误的完整详细信息。: Input path does not exist: hdfs://localhost:54310/user/hduser/input
at org.apache
浏览 26提问于2015-08-24得票数 10
我使用的是Spark 2.1.0。^ import spark.sql可能的原因是什么
浏览 0提问于2017-06-06得票数 18
我有一个64位的Ubuntu14.04，我安装了单节点集群Hadoop2.6，所有的节点都在运行，但是当我尝试将一个示例文本文件放入hdfs --它不起作用时，我已经开始学习hadoop，所以请解释一下，这会有帮助的。我需要命令帮助将测试文件放入hdfs并对文本文件执行简单的计算。web中的教程令人困惑，因为对于不同的hadoop和ubuntu版本，有些命令是不同的</em
浏览 0提问于2015-04-09得票数 1
回答已采纳
我的Java代码中有一些hadoop文件系统操作(例如：hdfs mkdir)。当我尝试使用java -cp运行java程序时，在linux本地文件系统中创建了目录。因此，我使用hadoop jar命令运行程序，并在hdfs中创建了目录。现在我计划使用hadoop jar命令来运行整个
浏览 2提问于2017-05-29得票数 0
每当我使用JAVA API将数据放入hdfs时，我都必须给出hdfs目标目录的权限。我已经尝试了以下代码：import java.io.BufferedReader;importat org.apache.hadoop.hdfs.server.namenode.FSNamesyste
浏览 0提问于2015-03-10得票数 0
我在scala中创建了一个火花应用程序。我调用了shell脚本中的submit命令我运行星火作业与用户作为构建。source/omega/omega_tracking_log/OMEGA_LOG_FULL是用户城域网创建的目录。metro和build是同一个组，名为h
浏览 1提问于2017-06-12得票数 0
1回答
有谁能告诉我是否有办法从java程序中将hadoop命令传递给hdfs (例如:创建用于删除目录和文件“hadoop -mkdir /test")？我试图通过java程序在hdfs中创建和删除目录和文件。
另外，有没有办法通过java程序检查hdfs中文件/目录的大小。我试图检查<
浏览 1提问于2014-07-19得票数 3
回答已采纳
4回答
要创建HDFS文件夹，可以增量地创建/user/SVLSTSLS/LostSales/sales-history-prep文件夹，如下所示：bash-4.1$ hadoop fs -mkdir /user/SVLSTSLS/LostSales
bash-4.1$ hadoop fs -mkdir /use
浏览 9提问于2016-09-15得票数 1
回答已采纳
有一个URLCat.java源文件。我使用javac将其编译成URLCat.class，然后使用jar将其包装到jar中。这本书说要用去运行它。我尝试过很多不同的方法，例如但没起作用。我犯了这样的错误：
线程“主”java.la
浏览 12提问于2010-08-31得票数 5
回答已采纳
我在尝试将文件从hdfs读取到Spark时遇到错误。文件README.md存在于hdfs中16/02/26 00:29:14 WARN util.NativeCodeLoader-rw-r--r-- 1 spark supergroup 4811 2016-02-25 23:38 README.md
在Spark shell中</e
浏览 13提问于2016-02-26得票数 7
1回答
背景S3不支持流(AFAIK)，因此在上传数据之前，需要将数据分组到适当大小的文件中。
在HDFS中本地(如果可能的话，我甚至不知道Hadoop中的</em
浏览 0提问于2016-09-23得票数 0
回答已采纳
我已经在本地安装了mesos，并按照mesos设置中提到的方式进行了配置。现在我想在本地机器上安装的mesos上运行spark。我已经根据官方文档配置了spark，并在本地机器上运行了单节点hadoop集群。Spark二进制包被复制到hdfs根目录，我在spark-env.sh中设置了以下属性：
export MESOS_NATIVE_JAVA_LIBRARY=/usr/local/lib/li
浏览 1提问于2017-09-19得票数 0
我得到了以下权限错误，并且不确定hadoop为什么要写到这个特定的文件夹：Number: org.apache.hadoop.security.AccessControlException: Permission denied: user=myuser, access=WRITE, inode="/&quo
浏览 3提问于2011-09-08得票数 10
回答已采纳
我是Pyspark的新手，我正在试着做一个简单的计数。然而，它给了我这个错误。文本文件在hdfs中。代码：>>> mydata.count()Traceback (most recent calllast):
File "<stdin>
浏览 0提问于2016-10-24得票数 7
最近我刚开始研究Hadoop，我只是做了一个实验来真正理解它。下面是教程：，我想问的是，在我基于本教程遇到几个命令之后，计算机系统中发生的后台进程是什么，例如
hadoop c：\Hwork\recip
浏览 1提问于2015-01-24得票数 0
我正在使用Mrjob在Hadoop中运行python代码。我在单节点集群上使用带有虚拟机的CDH包。当我在本地测试代码时，我的mrjob运行正常，但当我在Hadoop集群上运行时，它抛出一个错误：当我在python之前删除"sudo“命令时，我得到了以下消息/mrjob/hadoop.py
浏览 0提问于2013-10-23得票数 0
我最近开始学习hadoop，在创建新文件夹时，我得到了下面的错误-
vm4learning@vm4learning:~/Installations/hadoop-1.2.1/bin$ .:存储目录org.apache.hadoop.hdfs.server.common.Storage不存在2015-06-14 22:01:08,161错误org.apache.hadoop.hdfs.server.nam
浏览 1提问于2015-06-14得票数 1
回答已采纳
$Proxy35.getFileInfo(Unknown Source) at org.apache.hadoop.hdfs.DistributedFileSystem$18.doCall(DistributedFileSystem.java:1118)at org.apache.hadoop.hdfs</em
浏览 1提问于2017-06-01得票数 2
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
