开发者社区> 问答> 正文

spark中血统(RDD)的作用是什么?

spark中血统(RDD)的作用是什么?

展开
收起
游客y244y7ln2rlpa 2021-12-06 22:46:29 421 0
1 条回答
写回答
取消 提交回答
  • spark中血统(RDD)的作用是提供了一个抽象的数据模型,将具体的应用逻辑表达为一系列转换操作(函数)。另外不同RDD之间的转换操作之间还可以形成依赖关系,进而实现管道化,从而避免了中间结果的存储,大大降低了数据复制、磁盘IO和序列化开销并且还提供了更多的APl

    2021-12-06 23:08:16
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载