开发者社区> 问答> 正文

用 RocksDBStateBackend 时出现了这个错误

apache_flink 2019-02-14 15:23:34 634

转自钉钉群21789141:
3
用 RocksDBStateBackend 时出现了这个错误

分享到
取消 提交回答
全部回答(1)
  • apache_flink
    2019-07-17 23:28:14

    邱从贤:用 RocksDBStateBackend 时出现了这个错误
    追问:incremental 模式 这个没有,用的是 RocksDBStateBackend 他就是增量哈

           ![4](https://yqfile.alicdn.com/e66112b6d4109a020a299af421eda60a431b7ce0.png)
    

    邱从贤:那需要看下哪个 task 超时了,然后看下日志找找看为啥超时了
    追问:这个是错误日志,问了问度娘说:因为Mapred多个task操作同一个文件,一个task完成后删掉文件导致。 查看了下 dfs.datanode.max.xcievers 为 4096,难道这个值还是小了嘛

         ![5](https://yqfile.alicdn.com/e6d4f6acc722b153e19e9e45c30991404339ed66.png)
    

    茶干:你这个错误实际上是expire 的checkpoint清理导致的task failover,root cause还是为啥你的checkpoint会超时,相关错误汇报可以参考 FLINK-10615和FLINK-10930

    0 0
+ 订阅

时时分享云计算技术内容,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。

推荐文章