开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

sqlserver的Flink CDC在latest-offset模式下,能停掉任务,?

sqlserver的Flink CDC在latest-offset模式下,能停掉任务,在tableList加一张表吗?希望能够正常接上checkpoint

展开
收起
cuicuicuic 2023-08-01 15:02:11 64 0
1 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在latest-offset模式下,Flink CDC会从最新的offset开始读取数据,并不会从头开始读取数据,因此在停掉任务后再启动,可以正常接上checkpoint,并从最新的offset开始读取数据。

    如果需要在启动任务后,动态添加表到tableList中,可以尝试以下步骤:

    停止Flink CDC任务。

    修改tableList配置,添加要监控的表。

    启动Flink CDC任务,并等待任务从最新的offset开始读取数据。

    需要注意的是,如果在任务运行过程中修改了tableList配置,需要重新启动任务才能生效。此外,在动态添加表之后,需要确保表的schema和类型与Flink CDC任务的schema和类型匹配,以避免数据解析错误或者类型错误。

    2023-08-01 19:07:06
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载