开发者社区 问答 正文

mapreduce推测执行机制以及不能启用的情况是什么呢?

mapreduce推测执行机制以及不能启用的情况是什么呢?

展开
收起
游客vqgchj4kfdzsu 2021-12-06 00:19:51 365 分享 版权
1 条回答
写回答
取消 提交回答
  • 推测执行机制

      发现拖后腿的任务,比如某个任务运行速度远慢于任务平均速度。为拖后腿任务启动一个备份任务,同时运行。谁先运行完,则采用谁的结果。

    不能启用推测执行机制情况

      (1)任务间存在严重的负载倾斜;

      (2)特殊任务,比如任务向数据库中写数据。

    2021-12-06 10:35:08
    赞同 展开评论
问答分类:
问答标签:
问答地址: