开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

cdc有有脱离flink使用的吗?

cdc有有脱离flink使用的吗?加在一起太重了

展开
收起
真的很搞笑 2023-11-06 13:57:07 78 0
2 条回答
写回答
取消 提交回答
  • flink-cdc是必须用依赖flink的,怎么脱离,你可以自己用dezezium来采集,此回答整理自钉群“Flink CDC 社区”

    2023-11-08 07:39:37
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    Flink CDC 不可以直接独立使用,而是必须配合 Flink 执行引擎一起使用。这是因为 Flink CDC 需要在 Flink 流程中读取 Binlog 日志,然后转换为数据流。
    您可以将 Flink 和 CDC 结合使用,以实现高效的数据同步。在此过程中,可以将 CDC 作为一个 Flink Job 运行在 Flink 集群上,以节省资源。
    另外,您还可以尝试将数据同步过程拆分为两个阶段:

    1. 使用其他工具读取源数据库 Binlog 日志并将之保存到中间文件。
    2. 使用 Flink 加载中间文件并将之写入目标数据库。
    2023-11-06 14:46:27
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载