开发者社区> 问答> 正文

MapReduce中ReduceTask工作机制中的Copy阶段的工作是什么?

MapReduce中ReduceTask工作机制中的Copy阶段的工作是什么?

展开
收起
游客daliwbfb2wo66 2021-12-04 20:43:55 346 0
1 条回答
写回答
取消 提交回答
  • Copy阶段:ReduceTask从各个MapTask上远程拷贝一片数据,并针对某一片数据,如果其大小超过一定阈值,则写到磁盘上,否则直接放到内存中。

    2021-12-04 20:44:07
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink中的两类新型状态存储 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
Quanta:Quora的HBase分层计数系统 立即下载