开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC这个配置只支持TableSource吗?

Flink CDC中scan.incremental.snapshot.chunk.key-column这个配置只支持TableSource吗,使用DataStream API怎么配置这个参数?

展开
收起
真的很搞笑 2023-12-10 20:16:32 43 0
1 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    Flink CDC中的scan.incremental.snapshot.chunk.key-column配置只支持TableSource,不支持DataStream API。

    在TableSource中,可以通过以下方式配置该参数:

    ScanOptions scanOptions = new ScanOptions();
    scanOptions.withIncrementalSnapshotChunkKeyColumn("column_name");
    

    而在DataStream API中,无法直接配置该参数。如果需要在DataStream API中使用Flink CDC进行增量同步,可以考虑使用其他参数来控制增量同步的行为,例如scan.startup.modescan.startup.timestamp-millis等。

    2023-12-11 17:12:04
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载