开发者社区> 问答> 正文

mapreduce的过程中Merge阶段是什么?

mapreduce的过程中Merge阶段是什么?

展开
收起
芯在这 2021-12-11 10:30:08 466 0
1 条回答
写回答
取消 提交回答
  • Merge阶段:

    合并不同map端copy来的数据。不断地merge后,最后会生成一个“最终文件”,此文件可能存在于磁盘上,也可能存在内存中。直接作为Reducer的输入。默认情况下,此文件是存放于磁盘中的。

    2021-12-11 10:30:23
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
Spark优化实践 立即下载
Flink中的两类新型状态存储 立即下载