开发者社区> 问答> 正文

MapReduce中溢写发生在什么情况下呢?

MapReduce中溢写发生在什么情况下呢?

展开
收起
游客daliwbfb2wo66 2021-12-04 22:00:47 250 0
1 条回答
写回答
取消 提交回答
  • 当map task 的输出结果大于这个内存缓冲区的阀值是(buffer size * spill percent = 100MB * 0.8 = 80MB)溢写线程启动。

    2021-12-04 22:01:07
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
阿里云E-MapReduce 立即下载
\"Hadoop的过去现在和未来——从阿里云梯到E-MapReduce \" 立即下载
HBase on Beam 立即下载