开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

flinkcdc2.2.1同步完了之后增量的数据延迟能达到20分钟甚至一直不写入,可能是什么问题啊?

flinkcdc2.2.1同步mysql数据写入doris2.0 ,在同步历史数据的时候没有问题,同步完了之后增量的数据延迟能达到20分钟甚至一直不写入,可能是什么问题啊?日志里面也没有报错,测试造的几条数据

展开
收起
真的很搞笑 2023-11-07 19:23:18 59 0
1 条回答
写回答
取消 提交回答
  • 增量数据太少,一直没刷出去,一般是批量写数据到下游,减少下游数据库的压力,批量写,定时刷,那你需要去doris的官网看下连接器的参数配置,此回答整理自钉群“Flink CDC 社区”

    2023-11-08 07:42:37
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载