当我从Eclipse提交作业时，我就可以在Hadoop上远程提交作业了。在servlet的情况下，我得到了以下异常。$Invoker.invoke(WritableRpcEngine.java:231) at $Proxy11.getSystemDir(未知来源) at org.apache.hadoop.mapreduce.Cluster$1.run(Cluster.java:141) at org.apache.hadoop.mapredu
浏览 1提问于2015-02-18得票数 0
2回答
当我运行hbase mapreduce作业时，我得到以下错误： at org.apache.hadoop.mapreduce.Job$10.run(:1556)
at o
浏览 3提问于2014-12-24得票数 0
当尝试执行sqoop作业时，该作业将我的Hadoop程序作为-jarFiles参数中的jar文件传递，执行将以下面的错误结束。似乎没有任何决议。具有相同Hadoop用户的其他作业正在成功执行。.app.job.impl.JobImpl$InitTransition.transition(JobImpl.java:1396) at org.apache.
浏览 4提问于2015-02-05得票数 2
回答已采纳
1回答
如何在azure上提交用python编写的批处理作业。我正在寻找类似于此，但不是为java，而是为python。
curl -k --user "admin:mypassword1!"
浏览 0提问于2016-04-02得票数 1
3回答
Java应用程序是在Hadoop集群中执行的，只需一个Mapper任务就可以作为map-还原作业执行。如果一个java作业(不是单元作业或任何其他作业，只是一个直接的mapreduce作业)是oozie的一部分，那么我们得到一个映射器启动程序，并且实际的mapreduce作业独立运行。那么，是否有办法将启动程序和实际的mapreduce作业运行连接起来呢？比如用发
浏览 8提问于2015-12-18得票数 1
回答已采纳
我所处的情况是我有两个mapreduce作业。我更习惯使用python，并计划使用它来编写mapreduce脚本，并使用hadoop streaming来实现同样的目的。当使用hadoop流时，是否可以方便地链接以下两种形式的作业？Map1 -> Reduce1 -> Map2 -> Reduce2
我听说过很多在java中实现这一点的方法，但我需要一些Hadoop流的方法。
浏览 1提问于2011-01-07得票数 7
回答已采纳
1回答
此外，我不确定为什么，但这个错误只发生在最后3或4个reduce (在完成所有32个map作业和28个左右的reduce作业之后)。当我查看计数器信息时，它看起来从一开始(第一个映射作业)就创建了超过50个组，所以我不确定错误为什么会在结束时发生。at org.apache.hadoop.mapreduce.counters.Limits.checkCounters(Limits.java:97)
at org.apache.hadoop.mapredu
浏览 1提问于2017-07-07得票数 0
我在跟踪这就产生了以下错误：
弃用:不推荐使用此脚本执行对不起，已不再支持作业跟踪器命令。您可能会发现类似的功能与“纱线”外壳命令。使用: mapred -config confdir命令，其中命令之一是:管道运行管道作业操作MapReduce作业队列。获取有关JobQueues类路径的信息，打印运行
浏览 4提问于2015-05-22得票数 0
我以前从来没有用过java。我认为reducer函数需要返回一个元组。因此，映射器函数中的变量target是否需要这个元组？;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.mapreduc
浏览 30提问于2019-10-16得票数 1
回答已采纳
当尝试在HIB中的图像上运行作业Facecount时，我得到了此异常。我已经在类路径中包含了hipi-2.1.0.jar。(Shell.java:753) at org.apache.hadoop.mapreduce.v2.app.MRAppMaster$2.call(MRAppMaster.java(AbstractService.
浏览 0提问于2016-04-21得票数 1
uber模式下的作业job_1577368744752_0394 : false 19/12/30 16:24:46 INFO mapreduce.Job: map 0%减少0% 19/12/30 16(DBInputFormat.java:170)：java.lang.RuntimeException: java.sql.SQLException:缓存JDBC通信链接失败:连接超时(连接超时)在org.apache.hadoop
浏览 3提问于2020-01-02得票数 0
1回答
我使用Java编写了一个Map reduce作业。org.apache.hadoop.mapreduce.Cluster.initialize(Cluster.java:120)at org.apache.hadoop.mapreduce.Job$9.run(Job.jav
浏览 2提问于2014-08-14得票数 5
回答已采纳
我正在使用Hadoop和map reduce。我使用yahoo-vm机器制作map-reduce应用程序，它也附带了eclipse插件。但是当我自己尝试在我的电脑上单独安装hadoop时，即使经过多次尝试，我也无法在eclipse和HDFS之间建立链接。我想知道eclipse对于构建这些应用程序是必要的吗？
浏览 0提问于2013-02-10得票数 0
我是MapReduce的新手，我正在尝试寻找问题的解决方案。我正在尝试链接两个map reduce jobs.The第一个作业正在执行，但在第二个作业上，我收到如下错误 at org.apache.hadoop.mapred.MapTask.access$100(MapTask.java:81)
at org.apache.
浏览 0提问于2015-10-20得票数 5
1回答
我不需要在oozie工作流xml中设置作业驱动程序配置，比如Inputformat类等等，而是希望o调用我的ExampleDecision.java。ExampleDecision主要方法将负责作业设置和配置。怎么做？或
它是否等于Hadoop jar SomeJar.E
浏览 2提问于2015-08-31得票数 0
我最近升级到了clodera4b1 .Before upgraded作业运行得很好，但现在当我执行任何mapreduce程序时，出现以下错误：hadoop jar /usr/lib/hadoopat org.apache.hadoop.mapreduce.Cluster.initialize(Cluster.java:123)
at org.apache.hadoop.mapreduce</e
浏览 1提问于2012-04-11得票数 3
回答已采纳
Hadoop在读取大量小文件时工作得很好，但是我注意到，除了下面的例外，有时作业会失败，
org.apache.hadoop.mapreduce.lib.input.CombineFileRecordReader.initNextRecordReader(MapTask.java:483)，org.apache.hadoop.mapreduce.task.MapContextImpl.nextKeyValue(MapContextImpl.java:
浏览 9提问于2014-11-25得票数 2
我已经设置了Hadoop 2.3.0的2节点集群。它工作得很好，我可以成功地运行distributedshell-2.2.0.jar示例。但是当我尝试运行任何mapreduce作业时，我得到了错误。我已经根据()设置了用于运行MapReduce作业的MapRed.xml和其他配置，但我收到以下错误：
浏览 196提问于2014-03-22得票数 19
15回答
当我尝试执行这段代码时我得到了以下异常 at org.apache.hadoop.mapred.MapTask.runOldMapper(MapTask.java:428)
atorg.apa
浏览 3提问于2011-12-11得票数 61
回答已采纳
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号