DataWorks怎么使用独享调度资源组?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
在DataWorks中,使用独享调度资源组可以为某个项目或任务分配独立的调度资源,避免不同项目或任务之间的资源冲突,保证调度的稳定性和可靠性。以下是使用独享调度资源组的具体步骤:
创建独享调度资源组:在DataWorks的“调度资源组”页面中,可以创建一个新的独享调度资源组,为该资源组指定所在区域和可用资源。需要注意的是,独享调度资源组只能为一个项目或任务进行独立分配资源,因此需要根据实际需求合理分配资源。
分配独享调度资源组:在DataWorks的项目或任务页面中,可以为该项目或任务分配独享调度资源组。在“调度配置”中,选择该任务要使用的调度资源组,并设置相关的调度参数。
启用独享调度资源组:在完成独享调度资源组和调度配置的设置后,需要将该资源组设置为“启用”状态,才
要使用独享调度资源组(Exclusive Scheduler Resources Group)来管理和分配任务调度所需的资源,可以按照以下步骤进行操作:
通过使用独享调度资源组,您可以更好地管理和控制任务的资源分配。您可以根据业务需求和资源情况,合理安排任务的执行顺序和资源限制,提高任务的执行效率和稳定性。
请注意,使用独享调度资源组需要您具备相应的权限,以及对计算引擎的资源配额有足够的余量。如果您没有权限或资源配额不足,可能无法创建或使用独享资源组。
独享调度资源组需要绑定归属的工作空间,才可以在对应的工作空间下选择该资源组。一个独享调度资源组可以分配给多个工作空间使用:在资源组列表 > 独享资源组页面,单击相应资源组后的修改归属工作空间。在修改归属对话框中,选中分配独享调度资源组的目标工作空间。单击确定。绑定归属工作空间。独享调度资源组需要绑定归属的工作空间,才可以在对应的工作空间下选择该资源组。一个独享调度资源组可以分配给多个工作空间使用:在资源组列表 > 独享资源组页面,单击相应资源组后的修改归属工作空间。在修改归属对话框中,选中分配独享调度资源组的目标工作空间。单击确定。修改在数据开发页面测试任务使用的资源组:在数据开发页面,双击打开相应节点的编辑页面。单击工具栏中的图标。在参数对话框中,选择测试运行使用的调度资源组。单击确定。修改调度运行使用的调度资源组。您可以通过调度配置和运维中心页面修改调度资源组:通过调度配置页面修改调度资源组:单击左上角的
图标,选择全部产品 > 数据开发 > DataStudio(数据开发),并切换至修改的归属工作空间。在数据开发面板,双击打开相应节点的编辑页面。单击右侧的调度配置,在资源属性区域选择任务调度运行时需要使用的资源组。详情请参见配置资源属性。
通过运维中心页面修改调度资源组:单击左上角的
图标,选择全部产品 > 任务运维 > 运维中心(工作流),进入运维中心页面,并切换至修改的归属工作空间。在左侧导航栏,单击周期任务运维 > 周期任务。单击页面中间的箭头展开任务列表后,单击相应周期任务后的更多 > 修改资源组。https:/
https://help.aliyun.com/document_detail/164918.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。