开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC目前有整库同步吗?

Flink CDC目前有整库同步吗?

展开
收起
真的很搞笑 2023-12-19 08:08:05 110 0
2 条回答
写回答
取消 提交回答
  • 目前3.0 用pipeline有整库同步到doris和strarocks ,此回答整理自钉群“Flink CDC 社区”

    2023-12-19 16:22:40
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    是的,Flink CDC可以实现整库同步。Flink CDC是Flink社区开发的Flink-cdc-connector组件,它能够从MySQL、PostgreSQL等数据库直接读取全量数据和增量变更数据。配合Flink优秀的管道能力和丰富的上下游生态,Flink CDC可以高效实现海量数据的实时集成。

    以MySQL为例,要使用Flink CDC进行整库同步,首先需要在源数据库和目标数据库中分别创建一个数据库实例。然后,通过使用Flink CDC连接器将这两个数据库连接起来。此外,整库千表同步的操作也可以通过LakeSoul Flink CDC进行,该教程完整地演示了如何将一个MySQL库整库同步到LakeSoul中,涵盖了自动建表、DDL变更等操作。

    2023-12-19 14:52:24
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载