开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC 里我在代码中是这样写的,为什么还是将全量数据读取了?

/配置读取位置/
properties.setProperty("scan.incremental.snapshot.enabled","true");
properties.setProperty("scan.startup.mode","latest-offset"); // latest-offset initial
Flink CDC 里我在代码中是这样写的,为什么还是将全量数据读取了?initial 和 latest-offset 我选了第二个,还是全量。

展开
收起
小小鹿鹿鹿 2024-03-11 16:31:45 58 0
1 条回答
写回答
取消 提交回答
  • 如果用last-offset 那么 debezium的参数'debezium.snapshot.mode' = 'never' 。
    5db28b51090e46833eaebe5e2146ee71.png建议用增量快照,就是新的连接器。此回答来自钉群Flink CDC 社区 。

    2024-03-11 21:50:23
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载