开发者社区> 问答> 正文

hadoop mr 遇到ShuffleRefusedException怎么办?

封神 2016-04-11 13:42:38 977

运行hadoop mr,出现大量ShuffleRefusedException怎么办?

分布式计算 Hadoop
分享到
取消 提交回答
全部回答(1)
  • 封神
    2019-07-17 18:40:38

    当一个Job太多Reduce同时从一台机器上shuffle数据时,会在日志中打印这个异常。该异常只会导致shuffle延缓若干秒,不会导致Task或Job失败。

    0 0
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题