开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink 算子接收到 Barrier 会如何处理

Flink 算子接收到 Barrier 会如何处理

展开
收起
一人吃饱,全家不饿 2021-01-06 14:17:11 1164 0
1 条回答
写回答
取消 提交回答
    1. 如果是 Exactly-Once ,当 sink 算子收到所有上游的 Barrier 后,Sink 算子对自己的状态进行快照,然后通知检查点协调器,检查点协调器向所有算子确认本次快照完成;
    2. 如果是 End-to-End-Exactly-Once ,当 Sink 算子收到所有上游的 Barrier 后,Sink 算子对自己的状态进行快照,并预提交事务,再通知检查点协调器,检查点协调器向所有算子确认本次快照完成,Sink 算子提交事务,本次事务完成。
    2021-01-06 14:17:19
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载