开发者社区> 问答> 正文

flink rocksdb反压问题的处理

hi all, 我采用flink 1.10版本、rocksdb的状态后端,任务运行一段时间后出现反压的情况,导致任务的处理性能急剧下降,想请教一下有啥解决rocksdb状态后端下反压情况的优化手段吗?多谢*来自志愿者整理的flink邮件归档

展开
收起
船长的小螺号 2021-12-03 10:22:31 1104 0
1 条回答
写回答
取消 提交回答
  • 1、首先定位产生反压的位置(可以在 Flink UI 上查看或者根据 Flink 的 Metric 定位)

    2、定位到了反压源之后,处理反压可以先从系统资源/垃圾收集(GC)/线程竞争/负载不平衡 等基本原因去分析

    更详细的可以看下之前写的一篇文章

    https://gitbook.cn/gitchat/column/5dad4a20669f843a1a37cb4f/topic/5db6bed1f6a6211cb9616645*来自志愿者整理的FLINK邮件归档

    2021-12-03 11:18:47
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载