开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大家有没有碰到做cdc的时候,数据库连接数一直增长?是有配置没有配对吗?

大家有没有碰到做cdc的时候,数据库连接数一直增长?是有配置没有配对吗?

展开
收起
wenti 2023-02-27 12:56:44 178 0
1 条回答
写回答
取消 提交回答
  • 随心分享,欢迎友善交流讨论:)

    在使用Flink CDC进行数据库数据采集时,可能会遇到连接数一直增长的问题,这通常是由于以下原因导致的:

    数据库连接没有正确关闭。在使用完数据库连接后,需要显式地调用close()方法将连接关闭,以释放连接资源。如果没有关闭连接,连接将一直保持打开状态,导致连接数不断增加。

    并发任务数过多。在Flink任务中,可能会启动多个并发任务来处理数据,并在每个任务中使用数据库连接,如果并发任务数过多,将导致连接数不断增加。

    数据库连接池配置不当。在使用数据库连接池时,需要根据实际情况配置最大连接数、最小连接数、连接超时时间等参数,如果连接池配置不当,将导致连接数不断增加。

    为避免连接数不断增加的问题,可以采取以下措施:

    在代码中正确关闭数据库连接,确保连接资源得到释放。

    调整Flink任务的并发度,使用更少的并发任务来处理数据。

    根据实际情况配置数据库连接池参数,避免连接池过度占用连接资源。

    2023-03-27 10:28:27
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

热门讨论

热门文章

相关电子书

更多
DTCC 2022大会集锦《云原生一站式数据库技术与实践》 立即下载
阿里云瑶池数据库精要2022版 立即下载
2022 DTCC-阿里云一站式数据库上云最佳实践 立即下载