DataWorks独享调度资源组的使用?

DataWorks独享调度资源组的使用?

展开
收起
真的很搞笑 2023-07-30 16:59:02 76 分享 版权
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在DataWorks中,独享调度资源组是一种可以为某个项目或任务分配独立的调度资源的方式。使用独享调度资源组可以避免不同项目或任务之间的资源冲突,保证调度的稳定性和可靠性。以下是使用独享调度资源组的步骤:

    创建独享调度资源组:在DataWorks的“调度资源组”页面中,可以创建一个新的独享调度资源组,为该资源组指定所在区域和可用资源。需要注意的是,独享调度资源组只能为一个项目或任务进行独立分配资源,因此需要根据实际需求合理分配资源。

    分配独享调度资源组:在DataWorks的项目或任务页面中,可以为该项目或任务分配独享调度资源组。在“调度配置”中,选择该任务要使用的调度资源组,并设置相关的调度参数。

    启用独享调度资源组:在完成独享调度资源组和调度配置的设置后,需要将该资源组设置为“启用”状态,才能生效。

    2023-07-31 15:47:32
    赞同 展开评论
  • 要使用DataWorks的独享调度资源组来管理和分配任务调度所需的资源,您可以按照以下步骤进行操作:

    1. 登录DataWorks管控台,并进入项目空间。
    2. 在项目空间的左侧导航栏中,选择“研发调度”>“调度资源组”。
    3. 在调度资源组页面,点击“新建独享资源组”按钮。
    4. 在弹出的对话框中,填写独享资源组的名称、描述以及其他相关配置信息。
    5. 在资源配置选项中,为不同计算引擎设置资源配额。选择对应的计算引擎,在相应的输入框中填写并发数、内存限制等资源配置。
    6. 在调度策略选项中,设置任务的优先级和调度策略。根据任务的重要性和紧急程度,调整任务的执行顺序和资源分配。
    7. 完成配置后,点击“确认”按钮创建独享资源组。
    8. 创建成功后,您可以在调度任务的属性中选择该独享资源组来指定任务的执行资源。

    通过使用独享调度资源组,您可以更好地管理和控制任务的资源分配。可以根据业务需求和资源情况,合理安排任务的执行顺序和资源限制,提高任务的执行效率和稳定性。

    2023-07-31 12:57:50
    赞同 展开评论
  • 如果您暂无连通数据库实例的需求,只是为了缓解因公共调度资源组的资源紧张,导致任务延迟的问题,请忽略本文涉及网络的问题。您可以购买任意可用区的独享调度资源组,且无需绑定专有网络。注意独享调度资源组访问VPC环境数据源时,独享调度资源组需要绑定数据源所在VPC,绑定该VPC下任意一个交换机后,会自动添加路由至整个VPC网段,实现独享调度资源组在该VPC下网络可达。如果目的端数据库有白名单访问限制,走公网,您需要添加调度资源组的EIP地址,走内网,您需要添加独享调度资源组绑定的交换机网段至数据库的白名单和安全组。详情请参见添加独享调度资源组白名单。独享调度资源组对应规格支持的最大并发运行实例数,请参见独享调度资源组的性能指标和计费标准。
    https://help.aliyun.com/document_detail/164918.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-30 17:05:38
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理