DataWorks独享调度资源组的使用?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
在DataWorks中,独享调度资源组是一种可以为某个项目或任务分配独立的调度资源的方式。使用独享调度资源组可以避免不同项目或任务之间的资源冲突,保证调度的稳定性和可靠性。以下是使用独享调度资源组的步骤:
创建独享调度资源组:在DataWorks的“调度资源组”页面中,可以创建一个新的独享调度资源组,为该资源组指定所在区域和可用资源。需要注意的是,独享调度资源组只能为一个项目或任务进行独立分配资源,因此需要根据实际需求合理分配资源。
分配独享调度资源组:在DataWorks的项目或任务页面中,可以为该项目或任务分配独享调度资源组。在“调度配置”中,选择该任务要使用的调度资源组,并设置相关的调度参数。
启用独享调度资源组:在完成独享调度资源组和调度配置的设置后,需要将该资源组设置为“启用”状态,才能生效。
要使用DataWorks的独享调度资源组来管理和分配任务调度所需的资源,您可以按照以下步骤进行操作:
通过使用独享调度资源组,您可以更好地管理和控制任务的资源分配。可以根据业务需求和资源情况,合理安排任务的执行顺序和资源限制,提高任务的执行效率和稳定性。
如果您暂无连通数据库实例的需求,只是为了缓解因公共调度资源组的资源紧张,导致任务延迟的问题,请忽略本文涉及网络的问题。您可以购买任意可用区的独享调度资源组,且无需绑定专有网络。注意独享调度资源组访问VPC环境数据源时,独享调度资源组需要绑定数据源所在VPC,绑定该VPC下任意一个交换机后,会自动添加路由至整个VPC网段,实现独享调度资源组在该VPC下网络可达。如果目的端数据库有白名单访问限制,走公网,您需要添加调度资源组的EIP地址,走内网,您需要添加独享调度资源组绑定的交换机网段至数据库的白名单和安全组。详情请参见添加独享调度资源组白名单。独享调度资源组对应规格支持的最大并发运行实例数,请参见独享调度资源组的性能指标和计费标准。
https://help.aliyun.com/document_detail/164918.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。