开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

finkcdc oracle 2.4 无主键支持?好像丢数据。

finkcdc oracle 2.4 无主键支持?好像丢数据。

展开
收起
十一0204 2023-08-15 23:52:56 66 0
1 条回答
写回答
取消 提交回答
  • Flink CDC 2.4 版本之前的 Oracle Connector 确实不支持无主键的情况。这是因为无主键的表在变更数据的唯一性识别上存在一定的挑战,可能导致数据丢失或重复。

    从 Flink CDC 2.5 版本开始,Oracle Connector 已经支持了无主键表的场景。在无主键表上进行 CDC 数据同步时,Flink CDC 会根据表的全局唯一索引来追踪和同步数据变更。这样可以更好地处理无主键表的数据同步问题。

    如果您遇到了 Flink CDC 2.4 版本中无主键表导致的数据丢失问题,建议升级到 Flink CDC 2.5 版本或更高版本,以获得对无主键表的支持。

    另外,请确保在配置 Flink CDC 的 Oracle Connector 时,使用正确的连接参数和配置,并且根据实际情况设置适当的参数,如数据分区、检查点配置等,以确保数据同步的正确性和稳定性。

    希望以上信息对您有所帮助。如有进一步疑问,请随时追加提问。

    2023-09-20 15:46:21
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
PostgresChina2018_樊文凯_ORACLE数据库和应用异构迁移最佳实践 立即下载
PostgresChina2018_王帅_从Oracle到PostgreSQL的数据迁移 立即下载
Oracle云上最佳实践 立即下载

相关镜像