开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

对于Flink CDC,从库全量数据读取时,scan.startup.mode这个参数该用哪个?

对于Flink CDC,从库全量数据读取时,scan.startup.mode这个参数该用哪个,我现在用“initial”,但发现并没有全量读取?

展开
收起
想去床上睡觉 2024-07-03 14:08:39 490 0
1 条回答
写回答
取消 提交回答
  • scan.startup.mode参数的initial模式应当会执行全量数据扫描,然后跟上Binlog的实时变化。如果未按预期全量读取,可能是其他配置或使用情况的问题。请确保数据库配置正确,server-id是唯一的,并且scan.incremental.snapshot.enabled是true以开启增量快照。如果需要,可以尝试earliest-offset模式,但这要求从最早的Binlog开始,且在此期间表结构没有变化。如有必要,检查数据库的Binlog设置和Flink作业配置。image.png

    2024-07-04 11:10:08
    赞同 12 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载