Yarn【常用命令】

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: Yarn【常用命令】

1、yarn application 查看Application运行情况

1.1、列出所有Application

yarn application -list

可以通过Web UI端来查看:


1.2、根据Application状态过滤:

yarn application -list -appStates (所有状态: ALL 、 NEW 、 NEW_SAVING、 SUBMITTED 、 ACCEPTED 、 RUNNING 、 FINISHED 、 FAILED 、 KILLED )

例:查看所有已经结束的Application

yarn application -list -appStates FINISHED

1.3、Kill Application

yarn application -kill application_1612577921195_0001


2、yarn logs 查看日志

2.1、查询Application日志

yarn logs -applicationId application_1686040761512_0001

会把所有该作业的日志全部打印出来

2.2、查询Container日志:

yarn logs -applicationId application_1686040761512_0001 -containerId container_1686040761512_0001_01_000001

同样会打印一堆Container的容器日志。

3、yarn applicationattempt 查看尝试运行的任务

3.1、列出所有 Application 尝试的列表

也就是查看正在运行的任务

yarn applicationattempt -list application_1686040761512_0001

 

3.2、打印 ApplicationAttemp 状态:

yarn applicationattempt -status appattempt_1686040761512_0001_000001


4、yarn container 查看容器

容器只有运行作业的之后才能查看到,运行成功后就会释放掉

4.1、列出所有Container

yarn container -list appattempt_1686040761512_0001_000001

4.2、打印Container状态

yarn container -status container_1686040761512_0001_01_000001

5、yarn node查看节点状态

查看NodeManager的状态

5.1 、列出全部节点

yarn node -list -all

6、yarn rmadmin 更新配置

6.1、加载队列配置

不需要重启Yarn,直接刷新队列配置文件

yarn rmadmin -refreshQueues

7、yarn queue查看队列

7.1、打印任务队列信息

对于容器调度器的话,如果不指定队列,那么应用将被放在一个名为'"default"的默认队列当中。

yarn queue -status <队列名称>

也可以通过Hadoop提供的Web UI端来查看:

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
6月前
|
资源调度 Apache 流计算
Yarn命令详细介绍
Yarn命令详细介绍
166 2
|
资源调度 JavaScript Windows
yarn install命令报错解决办法-warning package-lock.json found.
yarn install命令报错解决办法-warning package-lock.json found.
318 0
|
资源调度
YARN集群启停命令
YARN集群启停命令
205 0
|
资源调度 JavaScript Windows
yarn install命令运行报错:无法将“yarn”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。...
yarn install命令运行报错:无法将“yarn”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。...
886 1
yarn install命令运行报错:无法将“yarn”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。...
|
1月前
|
缓存 资源调度 前端开发
Yarn学习,Yarn安装,Yarn常用命令。这一篇即可(有需要再补充)
Yarn 是一个快速、可靠、安全的 JavaScript 包管理工具,旨在解决 npm 的一些不足之处。
46 5
|
2月前
|
资源调度 分布式计算 Hadoop
使用YARN命令管理Hadoop作业
本文介绍了如何使用YARN命令来管理Hadoop作业,包括查看作业列表、检查作业状态、杀死作业、获取作业日志以及检查节点和队列状态等操作。
54 1
使用YARN命令管理Hadoop作业
|
3月前
|
SQL 资源调度 数据处理
实时计算 Flink版产品使用问题之-s参数在yarn-session.sh命令中是否有效
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
6月前
|
资源调度 前端开发 JavaScript
够啦!前端Yarn配置和命令
够啦!前端Yarn配置和命令
173 0
|
6月前
|
存储 资源调度 安全
yarn CLI 命令
yarn CLI 命令
177 0
|
资源调度
npm yarn 和 pnpm 之间命令的区别
npm yarn 和 pnpm 之间命令的区别
179 0