开发者社区> 问答> 正文

不启动Spark集群Master和work服务,可不可以运行Spark程序?

不启动Spark集群Master和work服务,可不可以运行Spark程序?

展开
收起
茶什i 2019-10-29 14:13:12 1624 0
1 条回答
写回答
取消 提交回答
  • 可以,只要资源管理器第三方管理就可以,如由yarn管理,spark集群不启动也可以使用spark;spark集群启动的是work和master,这个其实就是资源管理框架,yarn中的resourceManager相当于master,NodeManager相当于worker,做计算是Executor,和spark集群的work和manager可以没关系,归根接底还是JVM的运行,只要所在的JVM上安装了spark就可以。

    2019-10-30 15:15:45
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载