开发者社区> 问答> 正文

Flink CDC OceanBase Connector 如何处理全量数据和增量数据?

Flink CDC OceanBase Connector 如何处理全量数据和增量数据?

展开
收起
圆葱猪肉包 2024-08-21 14:03:20 29 0
1 条回答
写回答
取消 提交回答
  • 一般情况下,CDC 技术主要面向数据库的变更,用于捕获数据库中数据变更的技术。而 Flink CDC+ OceanBase 全增量一体化数据集成方案是将传统的数据库 CDC 技术跟 Flink 优秀的管道能力和丰富的上下游生态结合,将 CDC 数据通过加工后同步到下游,最终生成一个 OceanBase 解决方案,实现全量和增量的一体化同步。

    该方案的优势有两点:一是它可以通过一个组件、一条链路就解决数据同步需求,其链路更短,组件更少;二是 Flink SQL 支持分库分表聚合和 ETL,极大地降低了用户使用门槛,用户通过一个 Flink SQL 作业就完成了 CDC 的数据分析、加工和同步。
    image.png

    ——参考链接

    2024-08-31 07:43:40
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载