flinkcdc在读取pg数据时,算子消耗内存过大,该怎么设置可以取消掉这个算子?

请教下,flinkcdc在读取pg数据时,将changelog-mode设置为upsert时会出现一个ChangelogNormalize的算子,且算子消耗内存过大,写入的目标端是有主键的,理论上不需要这个算子,该怎么设置可以取消掉这个算子

展开
收起
防火防爆 2024-08-26 15:46:44 72 发布于辽宁 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 出现这个算子就说明sink收到的upsert key和下游主键不同 此回答整理自钉钉群“Flink CDC 社区 ① 群”

    2024-08-28 13:13:47 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

还有其他疑问?
咨询AI助理