开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

最新版本的flink-cdc可以支持通过 删除一个表,然后再添加这个表来触发这个表的全量同步吗?

最新版本的flink-cdc可以支持通过 删除一个表,然后再添加这个表来触发这个表的全量同步吗? 或者有没有其他方式能够触发一个已经添加过的表进行一次全量同步?

展开
收起
真的很搞笑 2023-12-10 20:20:27 45 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    对于最新版本的Flink CDC来说,如果希望对已添加过的表进行全量同步,可以通过以下步骤实现:首先针对这个新增的表,启动一个新的 Flink 作业专责执行全量同步,该作业会从头开始读取源表的数据,并将其同步到目标系统;同时,保证现有的增量作业继续运行,不受新表的影响,这些增量作业将继续读取源表的变化,并将其同步到目标系统。需要注意的是,这两个作业是独立运行的,它们之间没有直接的依赖关系。全量作业和增量作业应该具有适当的配置和规划,以避免资源冲突或性能问题。

    2023-12-11 17:06:29
    赞同 展开评论 打赏
  • 直接走个batch ,此回答整理自钉群“Flink CDC 社区”

    2023-12-11 11:22:25
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载