cdc有有脱离flink使用的吗?

cdc有有脱离flink使用的吗?加在一起太重了

展开
收起
真的很搞笑 2023-11-06 13:57:07 125 分享 版权
2 条回答
写回答
取消 提交回答
  • flink-cdc是必须用依赖flink的,怎么脱离,你可以自己用dezezium来采集,此回答整理自钉群“Flink CDC 社区”

    2023-11-08 07:39:37
    赞同 展开评论
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    Flink CDC 不可以直接独立使用,而是必须配合 Flink 执行引擎一起使用。这是因为 Flink CDC 需要在 Flink 流程中读取 Binlog 日志,然后转换为数据流。
    您可以将 Flink 和 CDC 结合使用,以实现高效的数据同步。在此过程中,可以将 CDC 作为一个 Flink Job 运行在 Flink 集群上,以节省资源。
    另外,您还可以尝试将数据同步过程拆分为两个阶段:

    1. 使用其他工具读取源数据库 Binlog 日志并将之保存到中间文件。
    2. 使用 Flink 加载中间文件并将之写入目标数据库。
    2023-11-06 14:46:27
    赞同 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理