开发者社区 问答 正文

使用FsStateBackend导致的oom

hi all ~

    我在使用FsStateBackend,这种方式checkpoint时,导致oom,查看堆内存中有大量的CopyOnWriteStateTable$StateTableEntry对象没有被清理。请问在使用FsStateBackend这种方式checkpoint后,内存中的state会被清理吗?

*来自志愿者整理的flink邮件归档

展开
收起
EXCEED 2021-12-08 13:52:58 1394 分享 版权
1 条回答
写回答
取消 提交回答
  • Checkpooint 不会导致 State 被清理。Checkpoint 只是将 State 备份到一个远程存储,供后续恢复使用。如果有大量

    CopyOnWriteStateTable$StateTableEntry 的话,首先需要确认,你作业真的会有大量的 state 存在吗?另外

    Checkpoint 相关的配置是什么,OOM 前是否有 checkpoint 失败这类

    *来自志愿者整理的flink邮件归档

    2021-12-08 14:52:08
    赞同 展开评论
问答地址: