用 RocksDBStateBackend 时出现了这个错误
转自钉钉群21789141：
用 RocksDBStateBackend 时出现了这个错误
展开
收起
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
1
条回答
写回答
-
Apache Flink China是经过Apache Flink官方授权的中文社区。是旨在向国内宣传和普及Flink相关技术，输出技术博文、译作、资讯等内容，推动国内大数据技术发展的开源社区。
邱从贤：用 RocksDBStateBackend 时出现了这个错误
追问：incremental 模式 这个没有，用的是 RocksDBStateBackend 他就是增量哈邱从贤：那需要看下哪个 task 超时了，然后看下日志找找看为啥超时了
追问：这个是错误日志，问了问度娘说：因为Mapred多个task操作同一个文件，一个task完成后删掉文件导致。 查看了下 dfs.datanode.max.xcievers 为 4096，难道这个值还是小了嘛
茶干：你这个错误实际上是expire 的checkpoint清理导致的task failover，root cause还是为啥你的checkpoint会超时，相关错误汇报可以参考 FLINK-10615和FLINK-10930
2019-07-17 23:28:14赞同 展开评论
相关问答