开发者社区> 问答> 正文

transformation的特点是什么?

transformation的特点是什么?

展开
收起
游客nxq6attzvywgk 2021-12-06 22:07:36 576 0
1 条回答
写回答
取消 提交回答
  • transformation的特点是lazy特性。lazy特性指的是,如果一个spark应用中只定义了transformation操作,那么即使你执行该应用,这些操作也不会执行。也就是说,transformation是不会触发spark程序的执行的,它们只是记录了对RDD所做的操作,但是不会自发的执行。只有当transformation之后,接着执行了一个action操作,那么所有的transformation才会执行。Spark通过这种lazy特性,来进行底层的spark应用执行的优化,避免产生过多中间结果。

    2021-12-06 22:08:11
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Data Science Transformation 立即下载
Streaming Outlier Analysis for 立即下载
Streaming Outlier Analysis for Fun and Scalability 立即下载