开发者社区> 问答> 正文

MapReduce中规约需要注意的地方是什么?

MapReduce中规约需要注意的地方是什么?

展开
收起
游客daliwbfb2wo66 2021-12-05 10:54:38 208 0
1 条回答
写回答
取消 提交回答
  • 我们如果不使用规约(combiner),所有的结果都要在reduce阶段完成,效率就会相对低下。使用combiner的话,就会在map端做本地聚合,提升效率

    combiner是在每一个maptask所在的节点运行,Reducer是接收全局所有Mapper的输出结果

    2021-12-05 10:54:52
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Storm源码走读笔记 立即下载
HBase 基本知识介绍及典型案例分析 立即下载
HBase基本知识介绍及典型案例分析 立即下载