开发者社区> 问答> 正文

MapReduce中ReduceTask工作机制中的Merge阶段的工作是什么?

MapReduce中ReduceTask工作机制中的Merge阶段的工作是什么?

展开
收起
游客daliwbfb2wo66 2021-12-04 20:44:20 283 0
1 条回答
写回答
取消 提交回答
  • Merge阶段:在远程拷贝数据的同时,ReduceTask启动了两个后台线程对内存和磁盘上的文件进行合并,以防止内存使用过多或磁盘上文件过多。

    2021-12-04 20:44:34
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink中的两类新型状态存储 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
HareQL:快速HBase查询工具的发展过程 立即下载