开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink-cdc-mysq的话这边建议哪个版本比较稳定可以做增量快照?

flink-cdc-mysq的话这边建议哪个版本比较稳定可以做增量快照?我是想用mysql数据验证下

展开
收起
真的很搞笑 2023-11-06 19:58:22 45 0
2 条回答
写回答
取消 提交回答
  • tidb-cdc这块不会, 2.3及以上都挺好,tidb-cdc 和mysql-cdc是两种连接器,不能混用,没有增量快照的话,确实有风险的,mysql-cdc是切片读取,基本是不会存在的,此回答整理自钉群“Flink CDC 社区”

    2023-11-08 07:41:01
    赞同 展开评论 打赏
  • Flink CDC MySQL连接器目前支持增量快照功能,并且从Flink CDC 2.0版本开始引入了增量快照算法。因此,建议使用Flink CDC 2.0及以上版本的MySQL连接器来验证数据。同时,需要确保使用的MySQL版本是5.7或更高版本。

    2023-11-07 11:30:55
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载