请教下 flink on k8s checkpoint 到s3上开始可以成功，任务跑一段时间后失败？
请教下 flink on k8s checkpoint 到s3上开始可以成功，任务跑一段时间后checkpoint 持续失败 有遇到吗？
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
-
北京阿里云ACE会长
在 Flink on Kubernetes 上使用 S3 存储进行 Checkpoint 可能会遇到一些问题，例如在任务运行一段时间后失败。这可能是由以下一些原因引起的：
存储桶权限错误
如果您的 Flink on Kubernetes 集群无法访问 S3 存储桶，则可能会导致 Checkpoint 失败。请确保您的 Flink on Kubernetes 集群具有正确的 S3 存储桶访问权限，例如读取、写入和列表权限。您可以使用 AWS CLI 或 S3 管理控制台为您的存储桶分配正确的权限。存储桶配置错误
如果您的 S3 存储桶配置不正确，则可能会导致 Checkpoint 失败。例如，如果您的存储桶不是公共可访问的，则可能需要使用 AWS 身份验证信息进行身份验证。您可以检查您的存储桶配置，并确保其与 Flink on Kubernetes 集群的配置相匹配。网络问题
如果您的 Flink on Kubernetes 集群无法连接到 S3 存储桶，则可能会导致 Checkpoint 失败。例如，如果存在网络故障或访问限制，则可能无法访问 S3 存储桶。您可以检查您的网络连接，确保您的 Flink on Kubernetes 集群可以正确连接到 S3 存储桶。存储桶容量不足
2023-07-29 20:09:48赞同 展开评论
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。