开发者社区> 问答> 正文

flink 缓存本地文件被删除是怎么回事?

这是早上发生异常后,我下载的日志,请麻烦查看一下。 taskmanager.log https://drive.google.com/file/d/17nP8yxSpdAnDDgBEbEUrDXYx-rwosi52/view?usp=drive_web*来自志愿者整理的flink邮件归档

展开
收起
彗星halation 2021-12-08 10:11:18 906 0
1 条回答
写回答
取消 提交回答
  • 这个异常是因为你的task 被cancel了,所以清理了相关目录,结果导致硬链时候原始目录下文件找不到了。 换言之,这个task ”累积数据 -> Sink: 写入到HBase (12/12)(55962df9fd694ed1f82b8f3ec2aaf6c4)” 是受害者,是因为其他异常导致整个作业failover,之后导致cancel了当前task,你应该在job manager日志中找到第一个fail的task,那上面的异常才是root cause。*来自志愿者整理的flink邮件归档

    2021-12-08 10:53:37
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Flink CDC Meetup PPT - 龚中强 立即下载
Flink CDC Meetup PPT - 王赫 立即下载
Flink CDC Meetup PPT - 覃立辉 立即下载