开发者社区 问答 正文

如何了解YARN架构的执行流程?

如何了解YARN架构的执行流程?

展开
收起
Medusa 2022-01-13 18:09:08 614 分享
分享
版权
1 条回答
写回答
取消 提交回答
  • 如下图所示,执行流程理解如下:

    配图14.png

    (1)客户端向 ResourceManager 提交作业,而 ResourceManager 负责全局资源管理和任务调度。

    (2)NodeManager 负责单个节点的资源管理和监控,会定时向ResourceManager 上报节点状态。

    (3)AppMaster(ApplicationMaster)负责单个作业的资源管理和任务监控,会向ResourceManager 发起资源请求。

    (4)Container 为资源申请和任务运行的容器,会向 AppMaster 上报 MapReduce 状态。

    以上内容摘自《海量数据处理与大数据技术实战》电子书,点击https://developer.aliyun.com/topic/download?id=8205可下载完整版

    2022-01-13 20:15:09 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等