开发者社区> 问答> 正文

Flink Checkpoint执行流程是怎样的

已解决

Flink Checkpoint执行流程是怎样的

展开
收起
提个问题 2024-06-12 18:07:07 8 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    1、Checkpoint Coordinator 所有 source节点触发Checkpoint; 
    2、source节点向下游广播barrier,这个barrier就是实现ChandyLamport分布式快照算法的核心,下游的task只有收到所有input的barrier才会执行相应的 Checkpoint; 
    3、当task完成state备份后,会将备份数据的地址(state handle) 通知给 Checkpoint coordinator; 
    4、下游的sink节点收集齐上游input的barrier之后,会执行本地快照。
    5、sink节点在完成自己的Checkpoint之后,会将state handle返回通知 Coordinator; 
    6、当Checkpoint coordinator收集齐所有task的state handle,就认为这一次的 Checkpoint全局完成了,向持久化存储中再备份一个Checkpoint meta文件。
    2024-06-12 18:07:08
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载