开发者社区> 问答> 正文

使用FsStateBackend导致的oom

hi all ~

    我在使用FsStateBackend,这种方式checkpoint时,导致oom,查看堆内存中有大量的CopyOnWriteStateTable$StateTableEntry对象没有被清理。请问在使用FsStateBackend这种方式checkpoint后,内存中的state会被清理吗?

*来自志愿者整理的flink邮件归档

展开
收起
EXCEED 2021-12-08 13:52:58 1365 0
1 条回答
写回答
取消 提交回答
  • Checkpooint 不会导致 State 被清理。Checkpoint 只是将 State 备份到一个远程存储,供后续恢复使用。如果有大量

    CopyOnWriteStateTable$StateTableEntry 的话,首先需要确认,你作业真的会有大量的 state 存在吗?另外

    Checkpoint 相关的配置是什么,OOM 前是否有 checkpoint 失败这类

    *来自志愿者整理的flink邮件归档

    2021-12-08 14:52:08
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
JVM的GC 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载