开发者社区> 问答> 正文

mapreduce的过程中copy过程是什么?

mapreduce的过程中copy过程是什么?

展开
收起
芯在这 2021-12-11 10:29:29 246 0
1 条回答
写回答
取消 提交回答
  • copy过程:

    简单地拉取数据。Reduce进程启动一些数据copy线程(Fetcher),通过HTTP方式请求map task的输出文件。因为map task早已结束,这些文件就归TaskTracker管理在本地磁盘中。

    2021-12-11 10:38:11
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
Hadoop存储与计算分离实践 立即下载
Quanta:Quora的HBase分层计数系统 立即下载