开发者社区 问答 正文

Hadoop中Mapreduce操作的mapper和reducer阶段相当于spark中的哪个算子?

Hadoop中Mapreduce操作的mapper和reducer阶段相当于spark中的哪个算子?

展开
收起
芯在这 2021-12-06 00:45:06 401 分享 版权
1 条回答
写回答
取消 提交回答
  • 相当于spark中的map算子和reduceByKey算子,当然还是有点区别的,MR会自动进行排序的,spark要看你用的是什么partitioner。

    2021-12-06 00:45:21
    赞同 展开评论