flinkcdc性能很差

服务器配置
3台40c 128GB
flink版本1.8 cdc版本3.0 yarn-session模式运行

目前使用datastream api对mysql进行数据抽取并sink到kafka端。
测试后发现tps为70左右 并行度为12

有什么方法能提升性能吗?

flink配置如下:
image.png

yarn配置如下:
image.png

代码配置如下:
image.png
image.png
image.png

展开
收起
游客oijr5izng3y4g 2024-11-05 17:15:34 245 分享 版权
1 条回答
写回答
取消 提交回答
  • 您可以尝试优化Flink CDC的配置参数,比如增加并行度和调整缓冲区大小,具体可以参考阿里云官方文档中的最佳实践指南。如果问题依旧,建议咨询一下阿里云的工作人员。如果对您有帮助的话,可以帮忙采纳一下。谢谢。

    2025-02-10 16:14:08
    赞同 104 展开评论

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

还有其他疑问?
咨询AI助理