flink sql配了5个mysql cdc表,如何避免这种情况?

请教一个问题,flink sql配了5个mysql cdc表,并且join后产生宽表,sink到kafka。当一个表的某个字段值被改变,会往kafka发送多条数据,导致下游消费会计算多次,如何避免这种情况?

展开
收起
夹心789 2024-05-28 15:18:40 40 发布于黑龙江 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 下游支持回撤,根据uperset-kafka中的主键操作对应的数据 ,此回答整理自钉群“【①群】Apache Flink China社区”

    2024-05-28 17:52:51 发布于黑龙江 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等