AI 助理
备案控制台
开发者社区 云计算 文章 正文

YARN 手动切换HA状态

2022-10-19 132
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： YARN 手动切换HA状态

RM2操作：

yarn rmadmin -getServiceState rm2


23802913ec0096dd10f39bc95ea3e98.png


yarn rmadmin -transitionToStandby rm2

ca9b6b9635f8c9d328745d53c4b954e.png



yarn rmadmin -transitionToStandby rm2 --forcemanual


5a22fa4e73f022c6192f9df1195ae33.png


RM1操作：

yarn rmadmin -transitionToActive rm1 --forcemanual
yarn rmadmin -getServiceState rm1

8c8cfd184af9149e335738fafeb1cab.png

文章标签：
资源调度
关键词：
Yarn ha
Yarn状态
与自己作战
目录
相关文章
邵奈一2018
|
资源调度 分布式计算 Hadoop
YARN的高可用性HA配置实战
YARN的高可用性HA配置实战
邵奈一2018
343 0
公众号胖滚猪学编程
|
机器学习/深度学习 分布式计算 大数据
大数据分布式架构单点故障详解(Hdfs+Yarn+HBase+Spark+Storm)构建HA高可用架构
本文梳理了常见的hadoop生态圈中的组件：Hdfs+Yarn+HBase+Spark+Storm的单点故障问题，出现原因以及单点故障的原理和解决方案（构建HA（High Available）高可用架构）。阅读本文之前，最好了解清楚各组件的架构原理。
公众号胖滚猪学编程
20759 0
大数据分布式架构单点故障详解(Hdfs+Yarn+HBase+Spark+Storm)构建HA高可用架构
突突修
|
存储 资源调度 容器
YARN HA架构部署测试
ResourceManager(RM)负责跟踪集群中的资源，并调度应用程序(例如MapReduce作业)。 在Hadoop 2.4之前，ResourceManager是纱线集群中的单一故障点。
突突修
1086 0
涂作权
|
分布式计算 Java Hadoop
hadoop-HA集群搭建，启动DataNode，检测启动状态，执行HDFS命令，启动YARN，HDFS权限配置，C++客户端编程，常见错误
本篇博文为整理网络上Hadoop-HA搭建后出来的博客，参考网址为：http://blog.chinaunix.net/uid-196700-id-5751309.html 3. 部署 3.1. 机器列表 共5台机器（zookeeper部署在这5台机器上），部署如下表所示： NameNode JournalNode DataNode ZooKeeper 192.168.106
涂作权
8018 0
涂作权
|
资源调度 分布式计算 Java
HDFS设计思路，HDFS使用，查看集群状态，HDFS，HDFS上传文件，HDFS下载文件，yarn web管理界面信息查看，运行一个mapreduce程序，mapreduce的demo
26 集群使用初步 HDFS的设计思路 l 设计思想   分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析；   l 在大数据系统中作用： 为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务   l 重点概念：文件切块，副本存放，元数据 26.1 HDFS使用 1、查看集群状态 命令：   h
涂作权
2621 0
sh_jepson
|
分布式计算 Java Hadoop
03【在线日志分析】之hadoop-2.7.3编译和搭建集群环境(HDFS HA,Yarn HA)
环境:CentOS6.5 1.下载hadoop2.7.3最新源码[root@sht-sgmhadoopnn-01 ~]# mkdir -p learnproject/compilesoft[root@sht-sgmhadoopnn-01 ~]# c...
sh_jepson
1270 0
sh_jepson
|
资源调度 分布式计算 Java
Hadoop2.7实战v1.0之YARN HA
YARN HA实战v1.0 当前环境:hadoop+zookeeper(namenode,resourcemanager HA)                  resourcemanager ...
sh_jepson
1251 0
sh_jepson
|
分布式计算 资源调度 Hadoop
【实验】Hadoop-2.7.2+zookeeper-3.4.6完全分布式环境搭建(HDFS、YARN HA)
Hadoop-2.7.2+Zookeeper-3.4.6完全分布式环境搭建 一.版本 组件名 版本 ...
sh_jepson
1156 0
月亮给我抄代码
|
3月前
|
资源调度 分布式计算 Hadoop
Hadoop Yarn 核心调优参数
这是一个关于测试集群环境的配置说明，包括3台服务器（master, slave1, slave2）运行CentOS 7.5，每台有4核CPU和4GB内存。集群使用Hadoop 3.1.3，JDK1.8。Yarn核心配置涉及调度器选择、ResourceManager线程数、节点检测、逻辑处理器使用、核心转换乘数、NodeManager内存和CPU设置，以及容器的内存和CPU限制。配置完成后，需要重启Hadoop并检查yarn配置。
月亮给我抄代码
51 4
月亮给我抄代码
|
3月前
|
SQL 分布式计算 资源调度
Hadoop Yarn 配置多队列的容量调度器
配置Hadoop多队列容量调度器，编辑`capacity-scheduler.xml`，新增`hive`队列，`default`队列占总内存40%，最大60%；`hive`队列占60%，最大80%。配置包括队列容量、用户权限和应用生存时间等，配置后使用`yarn rmadmin -refreshQueues`刷新队列，无需重启集群。多队列配置可在Yarn WEB界面查看。
月亮给我抄代码
52 4