开发者社区> 问答> 正文

HDFS和YARN的组成

定义HDFS和YARN的相应组件

展开
收起
茶什i 2019-11-06 16:35:52 1174 0
2 条回答
写回答
取消 提交回答
    1. HDSF 主要是master/slave的一个架构组成, nameNode, dataNode, nameNode主要是寻址,负载均衡,以及控制数据裂变转移, dataNode是获取实际数据.
    2. Yarn 主要有 ResourceManager, NodeManager ApplicationMaster. ResourceManager 主要负责资源的分配, NodeManager 负责管理node启动或者kill, applicationMaster 负责生成DAG, 管理任务的调度
    2020-03-29 15:50:57
    赞同 展开评论 打赏
  • 精于基础,广于工具,熟于业务。

    hdfs和yarn都属于hadoop的核心组件。 hdfs分布式文件存储系统,主要是存放元数据信息, yarn资源管理系统,负责任务的调度。

    2019-11-06 19:24:56
    赞同 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
深度学习+大数据 TensorFlow on Yarn 立即下载
Docker on Yarn 微服务实践 立即下载
深度学习+大数据-TensorFlow on Yarn 立即下载

相关实验场景

更多