前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >【Yarn】基本使用与监控

【Yarn】基本使用与监控

作者头像
十里桃花舞丶
发布2021-09-10 11:20:06
3090
发布2021-09-10 11:20:06
举报
文章被收录于专栏:桥路_大数据桥路_大数据

基本使用与监控

基本使用

Yarn是一个资源管理框架,所以它可以对提交到集群中的任务进行查看,并可以强制结束这些任务。

它常用的Shell命令有:

代码语言:javascript
复制
yarn  application  [command_options]
img
img

一般使用流程,是先用list查看集群中未完成的所有任务以及它的ID,如果想查看任务详细信息则使用status,如果想强制终止任务则使用kill。

代码语言:javascript
复制
# 查看Yarn中未完成的所有任务
yarn application -list
# 查看某个任务的运行状态
yarn application -status <Application ID>
# 强制终止某个任务
yarn appication -kill <Application ID>

首先使用mapreduce官方自带的案例,提交到yarn集群中运行,然后再将其终止掉。

代码语言:javascript
复制
cd $HADOOP_HOME/share/hadoop/mapreduce
# 计算圆周率,第一个参数为Map运行次数,第二个参数为投掷次数(用于计算圆的一种方式,此参数越大,计算出的圆周率越准确)
hadoop jar hadoop-mapreduce-examples-2.7.7.jar pi 10 10000
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2021-08-27 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 基本使用与监控
    • 基本使用
    领券
    问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档