开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC 支持mysql同步到vertica吗?

Flink CDC 支持mysql同步到vertica吗?https://github.com/ververica/flink-cdc-connectors/issues/2725

展开
收起
真的很搞笑 2023-12-05 20:14:33 59 0
3 条回答
写回答
取消 提交回答
  • 支持的。让mysql以二进制记录。从 MySQL CDC 连接器读取数据转换为适合写入 Vertica

    2023-12-06 20:30:05
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    Flink CDC支持将MySQL中的数据实时同步到Vertica。您可以使用基于查询的CDC方法,结合Flink SQL编写相应的同步任务。在具体操作过程中,需要先配置好MySQL和Vertica的连接信息,然后通过Flink SQL读取MySQL中的数据,再将数据写入到Vertica中。同时,需要注意的是,这种基于查询的CDC方法可能存在数据一致性和实时性的问题,因为查询的过程中有可能数据已经发生了多次变更。因此,对于数据一致性和实时性要求较高的场景,建议采用基于流式变更数据捕获(CDC)的方法来实现数据的实时同步。

    2023-12-05 20:51:49
    赞同 展开评论 打赏
  • 不支持直接导Vertica
    但是可以FlinkCDC从MySQL捕获变更事件。
    自定义的逻辑转换为适合写入 Vertica 的格式。利用 Vertica的JDBC写入 Vertica 数据库。

    2023-12-05 20:30:52
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关镜像