开发者社区> 问答> 正文

spark中的MEMORY_ONLY的缺点是什么?

spark中的MEMORY_ONLY的缺点是什么?

展开
收起
游客nxq6attzvywgk 2021-12-06 20:00:47 539 0
1 条回答
写回答
取消 提交回答
  • spark中的MEMORY_ONLY的缺点是还需要计算过程,效率相对来说较低,但事实上,由于是在内存中进行计算,所以重新计算时间消耗是远小于磁盘IO的,所以通常默认使用MEMORY_ONLY。除非中间计算开销特别大,这时候使用MEMORY_AND_DISK才会是一个更好的选择。

    2021-12-06 20:01:21
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载