开发者社区> 问答> 正文

spark的yarn集群模式Driver运行在什么上?

spark的yarn集群模式Driver运行在什么上?

展开
收起
游客nxq6attzvywgk 2021-12-06 21:10:38 793 0
1 条回答
写回答
取消 提交回答
  • spark的yarn集群模式Driver运行在Application Master上,Application Master进程同时负责驱动我们的代码程序和从ResourceManager申请资源。由于它直接运行在yarn的Container当中,所以并不需要客户端,客户端可以在提交完毕之后就关闭,

    2021-12-06 21:11:09
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载