Mr程序写完之后,提交给yarn,yarn会产生一个MRAppMaster,想说的是,yarn变得很
通用,yarn集群上,不光可以跑mr程序,还可以跑各种运算模型。
海量批处理,mapreduce
海量实时处理,spark
海量流式处理,storm
Mapreduce实现,MRAppMaster
Spark实现,spark AppMaster
Storm实现,storm AppMaster
说明,有了hdfs和yarn,什么框架都畅通无阻,运行。
以上是weekend110的YARN的通用性意义
按F5或者open declaration,
下面,来玩玩YarnClientProtocolProvider
因为,上面的断点,只执行到这里,所以这边的也显示到这步。
好的,以上是weekend110的yarn的job提交流程的源码跟踪分析。
Soga,可谓,真的,写源码的人牛逼,我这跟踪源码学习过程,学会到程序的循序渐进,,,
本文转自大数据躺过的坑博客园博客,原文链接:http://www.cnblogs.com/zlslch/p/5895776.html,如需转载请自行联系原作者