开发者社区> 问答> 正文

FLink消费kafka ,topic分区数128 ,qps 70万/s , flink 程序并行

FLink消费kafka ,topic分区数128 ,qps 70万/s , flink 程序并行度128,现在不做业务处理 ,纯消费还是延迟 ,大佬们有什么优化方法吗?

展开
收起
云上静思 2022-06-23 17:07:05 1578 0
1 条回答
写回答
取消 提交回答
  • 128 个分区消费几十万的QPS 没什么压力,应该是有数据倾斜了,试着在 kafka层面 解决下数据倾斜问题。

    此答案来自钉钉群“【2】Apache Flink China 社区”

    2022-06-23 20:05:30
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载