开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们,一个正常运行的使用yarn的flink任务,已开启checkpoint,然后再集群遇到不可预

大佬们,一个正常运行的使用yarn的flink任务,已开启checkpoint,然后再集群遇到不可预知的故障后,例如集群服务器断电,接着来电集群恢复正常后,如何获取该任务最新可用的checkpoint用于重启任务呢。主要是不知道在hdfs上保存的checkpoint目录下不知道哪个checkpoint是该任务的最新checkpoint。1253问.png

展开
收起
游客3oewgrzrf6o5c 2022-07-10 22:07:13 468 0
1 条回答
写回答
取消 提交回答
  • 只要你开启了检查点, Flink重启就会自动获取. 而取最新完成的还是未完成的, 取决于你开启检查点时的参数设置. (此答案整理自【③群】Apache Flink China社区)

    2022-07-10 23:17:57
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载