开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink sqlgateway 偶发性执行任务报错Stream closed web界面显示任务

Flink sqlgateway 偶发性执行任务报错Stream closed web界面显示任务取消 请问下需要修改啥配置 0b8b171c7202e27d16473db117e87def.png

展开
收起
十一0204 2023-04-11 09:03:40 326 0
2 条回答
写回答
取消 提交回答
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    这个问题可能是由于 SQL Gateway 的连接被关闭导致的。为了解决这个问题,您可以尝试以下几种方法:

    1. 增加 SQL Gateway 的连接超时时间:可以在 SQL Gateway 的配置文件中增加以下配置:

      gateway.server.idle.timeout.ms: 600000
      

      这个配置可以将 SQL Gateway 的连接超时时间设置为 10 分钟,从而避免连接被过早关闭。

    2. 增加 Flink 任务的执行超时时间:可以在 Flink 的配置文件中增加以下配置:

      execution.timeout.seconds: 3600
      

      这个配置可以将 Flink 任务的执行超时时间设置为 1 小时,从而避免任务执行时间过长导致连接被关闭。

    3. 增加系统的文件句柄限制:如果系统中同时打开的文件句柄数量超过了系统限制,也可能导致类似的问题。可以通过修改系统配置文件(例如 /etc/security/limits.conf)来增加系统的文件句柄限制。

    2023-04-26 22:41:53
    赞同 展开评论 打赏
  • 坚持这件事孤独又漫长。

    可能是由于任务资源竞争等问题引起的,可以尝试以下方法:

    1. 增加任务资源配置,如增加任务的 CPU 和内存等资源配置。

    2. 确认任务逻辑是否存在问题,例如处理数据时是否存在死循环等情况。

    3. 调整任务并发度,减小并发度,避免资源竞争。

    4. 检查 Flink 官方文档,查看当前版本的限制和最佳实践,尝试按照官方推荐的方式进行配置。

    2023-04-13 21:47:27
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载