开发者社区> 问答> 正文

spark中的粗粒度是什么,优缺点是什么?

spark中的粗粒度是什么,优缺点是什么?

展开
收起
游客y244y7ln2rlpa 2021-12-07 07:03:16 683 0
1 条回答
写回答
取消 提交回答
  • 粗粒度:启动时就分配好资源,程序启动,后续具体使用就使用分配好的资源,不需要再分配资源。好处:作业特别多时,资源复用率较高,使用粗粒度。缺点:容易资源浪费,如果一个job有1000个task,完成了999个,还有一个没完成,那么使用粗粒度。如果有999个资源闲置在那里,会造成资源大量浪费。

    2021-12-07 07:03:44
    赞同 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载