开发者社区> 问答> 正文

RDDJoin中宽依赖与窄依赖如何判断?

RDDJoin中宽依赖与窄依赖如何判断?

展开
收起
芯在这 2021-12-11 22:31:06 312 0
1 条回答
写回答
取消 提交回答
  • 如果Join之前被调用的RDD是宽依赖(存在shuffle), 而且两个join的RDD的分区数量一致,join结果的rdd分区数量也一样,这个时候join是窄依赖,除此之外的,rdd 的join是宽依赖

    2021-12-11 22:41:11
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
重新定义计算的边界 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载