腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Hadoop
MapReduce
未
生成
所需
的
输出
hadoop
、
mapreduce
我有一个包含专利信息
的
大文件。我想按年计算每个专利
的
平均索赔,其中关键是年份,值是平均金额。然而,reducer
输出
显示我
的
平均数量一直是1.0。我
的
程序哪里出了问题?3070804,1963,1096,,"US","OH",,1,,2,6,63,,3,,0.6667,,,,,,, 3070805,1963,1096,,"US","CA",,1,,2,6,63,,1,,0,,,,,,,
输出
浏览 24
提问于2020-04-22
得票数 2
1
回答
尝试使用Jdbc访问配置单元表时出错
hadoop
、
jdbc
、
hive
一个简单
的
"Select * from table“可以很好地工作,但是"Select count(*) from table”抛出了一个错误: 2017-04-20 18:05:57,709 INFOjava.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.
hadoop
.hive.ql.exec.mr.MapRedTask
浏览 4
提问于2017-04-20
得票数 0
1
回答
如何在HDFS中创建
所需
大小
的
空文件?
file
、
hadoop
、
resize
、
hdfs
、
truncate
我是
Hadoop
和HDFS
的
新手。我相信我
的
问题与有些关系。实际上,我尝试在HDFS中创建10 GB大小
的
空文件。truncate命令失败,因为似乎禁止指定大于现有文件大小
的
文件大小。
浏览 4
提问于2016-12-15
得票数 1
1
回答
MapReduce
工作流基准测试
hadoop
、
workflow
、
benchmarking
、
bigdata
、
oozie
任何机构都可以通过任何基准来测试
MapReduce
工作流吗?或者一般情况下,BigData工作流基准测试一些工作流系统
的
性能和准确性,如Oozie? 谢谢
浏览 3
提问于2014-04-09
得票数 0
1
回答
如何使用红移查询S3公共数据集
mysql
、
amazon-web-services
、
amazon-s3
我正在使用SQL工作台连接到我
的
redshift集群,我可以正常连接,但不能运行任何命令…… 如何查询常见
的
爬网s3数据集?
浏览 0
提问于2015-06-30
得票数 0
1
回答
“映射
输出
物化字节”与“映射
输出
字节”
hadoop
、
mapreduce
在
hadoop
作业计数器中,"Map output materialized bytes“与"map output bytes”
的
区别是什么?当我禁用map
输出
压缩时,我看不到前者,所以我猜它是真实
的
输出
字节(压缩
的
),而后者是
未
压缩
的
字节?
浏览 3
提问于2012-11-14
得票数 7
回答已采纳
1
回答
如何使用eclipse配置
hadoop
java
、
eclipse
、
hadoop
、
mapreduce
我是
hadoop
的
新手,我下载了hortonworks
的
桑盒映像,并将其挂载到virtualBox中。当我在Chrome中输入192.168.56.101/时,sanbox就会出现在本地主机中。此外,我还可以使用hue/
hadoop
用户名密码登录到
hadoop
。现在我想在eclipse中运行一个简单
的
程序。我已经将
hadoop
-0.18.3-eclipse-plugin添加到eclipse中,然后尝试了以下步骤。1.choosed map/
浏览 2
提问于2013-12-29
得票数 0
1
回答
未
调用Reducer
hadoop
、
reducers
这是埃博拉数据集
的
代码。在这里,reducer根本没有被调用。仅打印映射器
输出
。;import org.apache.
hadoop
.
mapreduce
.lib.input.FileInputFormat;import org.apache.
hadoop
.
mapreduce
.lib.input.KeyValueTextInputFormat; import org.apache
浏览 4
提问于2014-10-24
得票数 0
2
回答
在CDH4.0.1VM上使用MRV1运行字计数示例
hadoop
、
cloudera
我从下载了VM
hadoop
-0.20-
mapreduce
-tasktracker
hadoop
-纱线-资源分析器
hadoop</em
浏览 3
提问于2012-10-11
得票数 10
1
回答
HCatOutputFormat ClassNotFoundException
eclipse
、
hadoop
、
mapreduce
、
hive
、
hcatalog
我使用eclipse编写了这个程序,并从项目中创建了一个可运行
的
'Hadooptest‘jar,我在
hadoop
集群中使用
hadoop
命令运行jar (带有-libjars参数)。当我通过将所有引用
的
jar提取到jar文件中创建runnable jar,然后在
hadoop
集群中执行时,
mapreduce
运行良好并成功完成。问题是,当我使用“复制
所需
的
库到
生成
的
jar旁边
的
子文件夹”选项创建
浏览 2
提问于2016-06-29
得票数 0
3
回答
使用
Hadoop
MapReduce
进行排序字数统计
hadoop
、
mapreduce
、
word-count
、
parallel-processing
我对
MapReduce
非常陌生,我完成了一个
Hadoop
字数统计示例。 在该示例中,它
生成
单词计数
未
排序文件(带有键-值对)。那么,是否可以通过将另一个
MapReduce
任务与前一个任务相结合来按单词出现
的
次数对其进行排序呢?
浏览 1
提问于2010-03-31
得票数 10
1
回答
Yarn ClassNotFoundException: org.apache.
hadoop
.mapred.ShuffleHandler
hadoop
、
hadoop-yarn
这只是为我们记录这个错误和它
的
解决方案,因为我看到一些人有它,但没有找到一个解决方案在网络上。因此Nodemanager无法启动,这在日志中可以很容易地看到为当用户尝试使用以下命令手动启动它时
浏览 0
提问于2018-04-17
得票数 0
1
回答
查询是如何在Hive中分发
的
?
hadoop
、
hive
、
hiveql
我有一个关于Hive查询执行
的
问题。 如果将整个查询发送到所有节点,数据节点将只处理查询
的
一部分还是整个查询?如果是上述情况,那么数据节点处理
的
用途是什么?
浏览 0
提问于2013-07-08
得票数 0
5
回答
JAR不存在或不是普通文件。
java
、
hadoop
、
jar
、
hdfs
在
Hadoop
中运行wordcount示例时,我面临以下错误。saying "JAR does not exist or is not a normal file: 我
的
输入命令是:
hadoop
jar $
HADOOP
浏览 0
提问于2018-06-15
得票数 7
回答已采纳
1
回答
如何在
Hadoop
MapReduce
中将对象设置为映射
输出
的
值?
java
、
hadoop
、
mapreduce
、
distributed-computing
、
hdfs
在
Hadoop
中,对于中间
输出
(由
MapReduce
()
生成
),我希望中间
输出
的
值为以下对象。 date:Date}我是
MapReduce
的
新手。 谢谢。
浏览 2
提问于2012-12-14
得票数 4
回答已采纳
2
回答
maven JAR可以在
hadoop
上运行吗?
maven
、
hadoop
、
mapreduce
为了从
hadoop
mapreduce
程序(
mapreduce
wordcount示例)
生成
jar,我使用了maven。在这里,我成功地完成了“清理”和“安装”。还可以通过包含参数(输入和
输出
)作为Java应用程序运行来成功“构建”。并成功地提供了预期
的
结果。现在问题不是在
hadoop
上运行。出现以下错误:m
浏览 3
提问于2018-05-01
得票数 0
2
回答
Hadoop
中从命令行进行
的
压缩编解码器检测
hadoop
有什么简单
的
方法可以在
Hadoop
中找到用来压缩文件
的
编解码器吗? 我是否需要编写一个Java程序,或者将文件添加到配置单元中才能使用describe formatted table
浏览 3
提问于2014-11-15
得票数 4
1
回答
使用上下文对象在Mapper类
的
run方法中减少
Hadoop
?
hadoop
、
mapreduce
这是Mapper
的
setup(context它是否与输入和
输出
使用
的
context相同?
浏览 1
提问于2014-07-22
得票数 0
回答已采纳
2
回答
YARN:无法找到或加载主类org.apache.
hadoop
.
mapreduce
.v2.app.MRAppMaster
hadoop
、
hive
、
hdfs
、
classpath
、
hadoop-yarn
Hadoop
2.7.3和2.8.0存在相同
的
问题。这包括蜂巢。/share/
hadoop
/
mapreduce
/
hadoop
-
mapreduce
-client-core-2.7.3.jar最后但并非最不重要
的
浏览 2
提问于2017-06-26
得票数 1
1
回答
不安装
Hadoop
的
hadoop
程序编译
hadoop
如何编译
hadoop
示例程序(例如。没有安装
hadoop
? 我计划在Amazon上运行我
的
程序,所以我不需要在我
的
本地机器上运行我
的
程序。
浏览 3
提问于2014-06-18
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop 介绍
MapReduce详解
MapReduce编程模型
大数据入门基础系列之浅谈Hive的执行原理
大数据入门:MapReduce基本原理
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券