开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

有哪位知道为啥Flink CDC Mongodb的updateLookup默认为true?

有哪位知道为啥Flink CDC Mongodb的updateLookup默认为true?且不让修改吗?我们生产环境拉取事件的速度比产生的慢,导致经常出现oplog cursor找不到,排查到极有可能是这个update事件时会级联查询另一张表导致。74feb1e55f6ddaaba5bbab14eadb777c.png

展开
收起
小小鹿鹿鹿 2024-04-08 19:19:16 18 0
1 条回答
写回答
取消 提交回答
  • 我记得是因为,在增量快照读场景下,需要完整的行信息,才好将snapshot数据和changestream数据相合并。
    暴露出updateLook可能对准确性有些影响。可以自己修改编译下,在纯增量读场景,的确是可以设置成 false 的。此回答来自钉群Flink CDC 社区 。

    2024-04-08 20:27:20
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载