开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC中代码方式实现流表关联维表,维表是查adb的,流表和维表关联不上的怎么办?

问题1:Flink CDC中代码方式实现流表关联维表,维表是查adb的,流表和维表关联不上的,就放到mq,等维表数据进来再关联写到结果表。这样是不是实现不了?有的关联条件就不是主键来关联的。
问题2:放到mq的怎么触发呢?

展开
收起
十一0204 2023-08-16 08:03:07 96 0
1 条回答
写回答
取消 提交回答
  • 意中人就是我呀!

    "回答1:可以放到mq,但是会增加一个链路,需要另外增加flink资源消耗。
    回答2:mq也是流,就普通流接入。也可以一个程序,多source,只是你通过rocketmq 解耦,mq里的消费完了等下一个流来,就不丢可以写入mysql,再用cdc接入也能持久化数据。此答案整理至钉群“Flink CDC 社区“。"

    2023-08-16 08:58:42
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载