DataWorks这里的并发数为什么和文档说的不一致呢 ?

问题1:DataWorks这里的并发数为什么和文档说的不一致呢 ?image.png
image.png
问题2:这个数量是不会对并发数有加成的是吧?image.png

展开
收起
真的很搞笑 2023-07-22 15:39:19 84 分享 版权
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    如果用户通过DataWorks购买ECS构建VPC,并将其作为资源组来执行数据集成任务,可以实现资源独享的方案。资源组是DataWorks中用于管理任务执行资源的逻辑分类方式。

    在该方案中,用户可以创建一个名为"prod"(或其他适当的名称)的资源组,并将所购买的ECS实例添加到该资源组中。这样,该资源组中的任务将独占这些ECS实例,保证资源的独享性。

    然而,需要注意的是,你提到当前资源组单台机器最大支持并发8,任务配置并发16。这意味着在该资源组中,单个ECS实例最大支持并发8个任务,而整个资源组最大支持并发16个任务。

    如果你的任务并发需求超过了资源组的限制,你可以考虑以下几点:

    扩展资源组:可以通过增加更多的ECS实例来扩展资源组的并发能力。你可以购买更多的ECS实例,并将它们添加到资源组中,以增加任务的并发度。

    优化任务调度:可以对任务的调度策略进行优化,确保任务的并发度在资源组限制范围内。可以调整任务的调度计划、依赖关系等,以合理分配任务并发。

    联系DataWorks技术支持:如果你的需求无法通过上述方法解决,可以联系DataWorks的技术支持团队,寻求专业的帮助和建议。他们可以根据你的具体情况提供更详细的指导和解决方

    2023-07-30 17:27:12
    赞同 展开评论
  • 如果在DataWorks中的并发数与文档描述不一致,可能有以下原因:

    1. 版本差异:DataWorks的不同版本可能具有不同的功能和配置选项。确保你参考的文档与你当前使用的DataWorks版本相匹配。如果你使用的是更新版本的DataWorks,部分功能或配置项可能已经发生了变化。

    2. 权限限制:并发数可能受到你的账户或项目的权限限制。某些操作需要特定的权限才能设置或更改并发数。请联系DataWorks管理员或项目负责人,确认你是否具有相应的权限来修改并发数。

    3. 个人订购计划:并发数的限制也可能与你的个人订购计划相关。不同的订购计划可能提供不同的并发数限制。请检查你的订购计划或与阿里云客服联系,以确保你获取了正确的并发数限制。

    2023-07-23 13:03:00
    赞同 展开评论
  • 回答1:第一个是集成资源组 第二个是调度资源组
    回答2:有两台及以上资源组 可以考虑开启分布式 再加并发 可以提速,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-22 16:07:11
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理