开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink sql配了5个mysql cdc表,如何避免这种情况?

请教一个问题,flink sql配了5个mysql cdc表,并且join后产生宽表,sink到kafka。当一个表的某个字段值被改变,会往kafka发送多条数据,导致下游消费会计算多次,如何避免这种情况?

展开
收起
夹心789 2024-05-28 15:18:40 37 0
1 条回答
写回答
取消 提交回答
  • 下游支持回撤,根据uperset-kafka中的主键操作对应的数据 ,此回答整理自钉群“【①群】Apache Flink China社区”

    2024-05-28 17:52:51
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    SQL Server在电子商务中的应用与实践 立即下载
    GeoMesa on Spark SQL 立即下载
    原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载

    相关镜像