开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks在线查询一直显示 “正在等待在云端的gateway资源”,这是咋回事啊?

DataWorks在线查询一直显示 “正在等待在云端的gateway资源”,数仓开发同学说资源占用正常,这是咋回事啊?

展开
收起
真的很搞笑 2024-06-23 11:20:08 6 0
1 条回答
写回答
取消 提交回答
  • 为什么任务一直在等待gateway调度资源?
    问题现象
    任务日志中显示等待gateway调度资源。

    产生原因
    当前资源组里的任务并发数达到上限。

    解决措施
    需要等待运行中的任务执行完成释放资源,或者对独享调度资源组进行扩容。您可以通过以下方式查看资源信息。
    使用公共调度资源组
    通过智能诊断查看
    您可进入运维中心 > 智能诊断,输入实例ID,对任务进行全链路分析,查看当前任务执行、排队情况,以及当前任务等待资源时,哪些任务占用了资源。快速定位长期占用资源,阻塞链路执行的任务。详情请参见智能诊断。
    image.png

    在等待资源的实例节点,右键选择运行诊断 > 调度资源,查看当前任务运行状态为等待资源时,仍在运行的任务。
    image.png

    通过运维大屏查看
    您可在运维中心的运维大屏页面,查看公共资源组使用率。
    说明
    每天0点~9点是DataWorks的任务高峰期,公共调度资源紧张,可能出现任务等待资源的情况。 您可以错峰运行调度任务或者在DataWorks控制台添加独享调度资源组缓解资源紧张情况。

    参考文档https://help.aliyun.com/zh/dataworks/support/nodes-that-are-waiting-for-resources?spm=a2c4g.11186623.0.i3#section-xan-rct-m8q

    2024-06-24 09:02:22
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks高效数据分析最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多