开发者社区 问答 正文

如何避免新启动作业的 Checkpoint 跨作业文件引用的问题?

如何避免新启动作业的 Checkpoint 跨作业文件引用的问题?

展开
收起
夹心789 2024-07-30 18:29:08 46 分享 版权
1 条回答
写回答
取消 提交回答
  • 在恢复 previous-sst-list 之前,判断 restore Checkpoint 所属的作业是否是当前作业。如果不是,则不恢复 previous-sst-list,这样作业启动后的第一个 Checkpoint 就会上传所有文件,之后的 Checkpoint 再基于前面的 Checkpoint 进行增量制作,从而避免跨作业文件引用。

    2024-07-30 20:12:49
    赞同 4 展开评论
问答地址: