开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

有哪位用过Flink CDC oracle cdc 抽取数据 任务能从savepoint恢复吗?

有哪位用过Flink CDC oracle cdc 抽取数据 支持新加表 任务能从savepoint恢复吗?

展开
收起
真的很搞笑 2023-09-06 19:09:40 70 0
1 条回答
写回答
取消 提交回答
  • 是的,Flink CDC 支持 Oracle CDC 抽取数据,并且在任务从 savepoint 恢复时也能够处理新加的表。

    当您使用 Flink CDC 连接 Oracle CDC 并抽取数据时,Flink CDC 会监控 Oracle 数据库的日志,并将抽取到的数据作为流式数据进行处理。在 Flink 中,您可以使用 Flink CDC Connector 提供的功能来处理抽取到的数据,例如转换、过滤、聚合等。

    当您将 Flink CDC 作业保存为 savepoint 并稍后恢复时,Flink CDC Connector 会使用最新的 offset 信息来继续从上次抽取的位置开始,并将新加的表作为新的输入流进行处理。这意味着任务能够从 savepoint 恢复,并且能够处理新加入的表。

    需要注意的是,为了支持任务从 savepoint 恢复并处理新加的表,您需要保持 Flink CDC 作业的配置和代码保持一致,并且确保使用的 Flink CDC Connector 版本与之前的版本兼容。这样才能正确处理新加的表,并保证数据的一致性。

    总结而言,Flink CDC 支持 Oracle CDC 抽取数据,并且能够在任务从 savepoint 恢复时处理新加的表。请确保配置和代码的一致性,并使用兼容的 Flink CDC Connector 版本来保证正确的恢复和处理。

    2023-09-20 17:54:54
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载