开发者社区 问答 正文

RDD依赖是什么?

RDD依赖是什么?

展开
收起
芯在这 2021-12-07 14:20:43 328 分享 版权
1 条回答
写回答
取消 提交回答
  • RDDs通过操作算子进行转换,转换得到的新RDD包含了从其他RDDs继承来的信息,RDDs之间维护着这种血缘关系,也称之为依赖。依赖包括两种,一种是窄依赖,RDDs之间分区是一一对应的,另一种是宽依赖,下游RDD的每个分区与上游RDD(也称之为父RDD)的每个分区都有关,是多对多的关系。

    2021-12-07 14:20:58
    赞同 展开评论
问答分类:
问答地址: