开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC如果只是生产者开启了,消费者没开启。这样会导致数据的丢失吗?

Flink CDC就是生产者和消费者都开始事务,是肯定不会丢数据的对嘛,如果只是生产者开启了,消费者没开启。这样会导致数据的丢失吗?

展开
收起
真的很搞笑 2023-10-18 14:17:19 61 0
1 条回答
写回答
取消 提交回答
  • Flink CDC中生产者和消费者都开始事务是一种常见的方式,可以保证数据的完整性和一致性,避免数据的丢失。但是,如果只有生产者开启了事务,而消费者没有开启,那么可能会导致数据的丢失。
    因为在Flink CDC中,数据的处理是由生产者和消费者共同完成的,如果只有生产者开启了事务,而消费者没有开启,那么在数据处理过程中,如果出现了异常,可能会导致数据的丢失。因此,为了避免数据的丢失,建议在Flink CDC中,生产者和消费者都开启事务。如果只有生产者开启了事务,那么在消费者处理数据时,应该检查事务的状态,如果发现事务未完成,应该及时提交或回滚事务,避免数据的丢失。

    2023-10-18 16:18:41
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载