开发者社区> 问答> 正文

spark持久化后的执行原理是什么?

spark持久化后的执行原理是什么?

展开
收起
游客nxq6attzvywgk 2021-12-06 20:19:04 497 0
1 条回答
写回答
取消 提交回答
  • spark持久化后的执行原理是每次对一个RDD执行一个算子操作时,都会直接从内存或磁盘中提取持久化的RD数据,然后再其基础上执行你的算子操作,而不会从源头重新计算一遍这个RDD,从而提高了执行效率。

    2021-12-06 20:19:35
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载