首页
学习
活动
专区
工具
TVP
发布

大数据-Hadoop、Spark

专栏作者
88
文章
140925
阅读量
39
订阅数
yarn node -list
[yarn@bigdata016 ~]$ yarn node -list 2021-01-12 00:07:07,642 INFO [main] client.ConfiguredRMFailoverProxyProvider (ConfiguredRMFailoverProxyProvider.java:performFailover(100)) - Failing over to rm2 Total Nodes:32 Node-Id Node-State Node-H
sparkle123
2021-01-14
4500
FsImage Analyse Tool
该工具提供自动化解析HDFS集群FSImage文件,并解析成文本文件存储在HDFS中;解析后的信息通过Hive映射成表,并通过Hive进行相关信息统计,使用有数生成相关报表。
sparkle123
2021-01-08
8270
Spark on YARN基础
不管使用哪种模式,Spark应用程序的代码是一模一样的,只需要在提交的时候通过--master参数来指定我们的运行模式即可
sparkle123
2020-11-24
6130
本地Eclipse提交MR程序到Yarn
1、一般地,从Windows本地的Eclipse提交程序到yarn,会报如下错误: Diagnostics: Exception from container-launch. Container id: container_1526537597068_0006_02_000001 Exit code: 1 Exception message: /bin/bash: line 0: fg: no job control Stack trace: ExitCodeException exitCode=1: /
sparkle123
2018-07-04
5250
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档