YARN基本接口简析

简介:

快速看了一下yarn的基本Interface,两个特点:事件+状态(SEDA),服务化

StateMachine:每个实体类在初始化时会定义好该类的一个状态机的状态拓扑,并有hook来处理这个过程

Event:描述事件的实体

EventHandler:用来处理具体类型事件,调用StateMachine做状态转换处理

Dispatcher:绑定某类事件到具体的Handler上,将具体的事件放到eventQueue中,(AsyncDispatcher)异步的将具体的事件分发到Handler上处理

Service:将自己注册到相应的ServiceStateChangeListener,封装了DispatcherHandler

AbstractService:当状态发生变化时调用listener的回调

YARN RPC:封装了hadoopRPC client/server,加了一些新增的协议,以及可以配置序列化方式


本文转自MIKE老毕 51CTO博客,原文链接:http://blog.51cto.com/boylook/1320232,如需转载请自行联系原作者

相关文章
|
资源调度 分布式计算 监控
|
8月前
|
资源调度 前端开发 JavaScript
够啦!前端Yarn配置和命令
够啦!前端Yarn配置和命令
220 0
|
8月前
|
资源调度 分布式计算 监控
YARN【工作机制】
YARN【工作机制】
|
资源调度 分布式计算 监控
yarn入门(一篇就够了)
yarn入门(一篇就够了)
228 0
|
资源调度 调度 容器
Yarn 的工作原理、流程【重要】
Yarn 的工作原理、流程【重要】
172 0
|
资源调度 分布式计算 监控
【Hadoop技术篇】YARN 作业执行流程
Yarn的作业流程是每个大数据领域的工作者都应该熟记于心的内容,今天我就来整理一下执行流程,记得点赞加收藏哦。 
275 0
【Hadoop技术篇】YARN 作业执行流程
|
资源调度
yarn简单使用
yarn简单使用
229 0
yarn简单使用
|
资源调度 分布式计算 Spark
Spark的YARN模式运行机制
Spark的YARN模式运行机制
253 0
Spark的YARN模式运行机制
|
资源调度 分布式计算 Hadoop
YARN 工作机制|学习笔记
快速学习 YARN 工作机制
140 0
YARN 工作机制|学习笔记
|
XML 资源调度 分布式计算
启动 YARN 并运行 MR 程序|学习笔记
快速学习 启动 YARN 并运行 MR 程序
253 0
启动 YARN 并运行 MR 程序|学习笔记