开发者社区> 问答> 正文

mapreduce推测执行机制以及不能启用的情况是什么呢?

mapreduce推测执行机制以及不能启用的情况是什么呢?

展开
收起
游客vqgchj4kfdzsu 2021-12-06 00:19:51 342 0
1 条回答
写回答
取消 提交回答
  • 推测执行机制

      发现拖后腿的任务,比如某个任务运行速度远慢于任务平均速度。为拖后腿任务启动一个备份任务,同时运行。谁先运行完,则采用谁的结果。

    不能启用推测执行机制情况

      (1)任务间存在严重的负载倾斜;

      (2)特殊任务,比如任务向数据库中写数据。

    2021-12-06 10:35:08
    赞同 展开评论 打赏
问答分类:
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Flink中的两类新型状态存储 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
JS 语言在引擎级别的执行过程 立即下载