开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flink cdc抽取hologres 2张表采用的增量,这个问题怎么解决?

flink cdc抽取hologres 2张表采用的增量模式,2个表的增量数据每天都在8000w左右,采用的会话窗口进行join设置了上下限30s(60s内可能会来多条相同设备编号的数据),join用的是设备编号关联可能会出现多对多的关联,最后是按insertorupdate模式写入的表。现在的问题是刚开始运行的时候sink端busy会随着时间增大,最后产生背压,需要无状态重启一下才能恢复?aec8093818bb53391fd300fdb0c589ec.png

展开
收起
小小鹿鹿鹿 2024-05-01 08:55:14 13 0
0 条回答
写回答
取消 提交回答

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载