开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks如果作业选了独享调度资源,后期任务阻塞,会自动分配到公共调度资源运行吗?

DataWorks如果作业选了独享调度资源,后期任务阻塞,会自动分配到公共调度资源运行吗?

展开
收起
真的很搞笑 2023-12-31 08:00:38 73 0
2 条回答
写回答
取消 提交回答
  • 阿里云DataWorks中的作业如果配置了独享调度资源组,在资源充足的情况下,该任务会优先在所选的独享资源组中执行。若后期由于某种原因(例如独享资源组内的资源达到上限或出现阻塞),按照常规设计逻辑和目前公开的信息,并不会自动将这些任务切换到公共调度资源运行。

    独享调度资源组是为了确保特定任务能够获取稳定的、不受其他任务干扰的计算资源而设置的,其主要目的是保证任务的性能和执行效率。因此,在任务规划和资源配置时,需要预先评估工作负载并合理分配资源以避免资源耗尽导致的任务阻塞。

    若遇到独享资源组内资源不足的情况,通常需要管理员手动调整资源配置或者优化任务结构与执行策略来解决问题,而不是自动降级到公共调度资源。

    2023-12-31 13:42:28
    赞同 展开评论 打赏
  • 不会自动分配 选择哪个资源组 就是等哪个资源组 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-12-31 10:51:45
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多