开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks数据集成必须用独享资源组吗?

DataWorks数据集成必须用独享资源组吗?

展开
收起
cuicuicuic 2023-07-01 15:59:53 42 0
3 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在DataWorks中,数据集成任务不一定必须使用独享资源组,可以根据实际情况选择不同的资源组。

    独享资源组是一种在阿里云MaxCompute上创建的资源池,可以独享MaxCompute的计算和存储资源,提供更高的计算和处理能力。使用独享资源组可以提高数据集成任务的执行效率和性能,特别是对于数据量较大的任务,更能发挥其优势。

    但是,使用独享资源组也会带来一定的成本和管理负担,因为需要为独享资源组单独购买计算和存储资源,并且需要对资源组进行管理和维护。

    如果您的数据集成任务的数据量比较小,或者对任务的执行效率要求不高,可以选择使用共享资源组或者默认资源组。共享资源组可以与其他任务共享MaxCompute的计算和存储资源,成本相对较低,但是可能会受到其他任务的影响,导致任务的执行效率下降。默认资源组是MaxCompute中的一个默认资源池,不需要额外的成本和管理负担,但是也可能会受到其他任务的影响,执行效率较低。

    2023-07-31 20:12:59
    赞同 展开评论 打赏
  • 不,DataWorks数据集成不一定必须使用独享资源组。在DataWorks中,可以选择使用共享资源组或独享资源组来运行和管理数据集成任务。

    共享资源组是一种多租户环境,多个用户可以共享同一个资源组中的资源,包括存储、计算等。这种资源组适合小型项目或者资源需求较低的情况。

    而独享资源组则为每个用户提供了独立的资源环境,可以单独配置和管理资源,以满足大规模、高并发的数据集成需求。这种资源组适用于对资源要求较高的项目或者需要更好的隔离性和性能的情况。

    根据实际需求和预算限制,您可以选择使用共享资源组或独享资源组来支持DataWorks数据集成。

    2023-07-01 18:31:39
    赞同 展开评论 打赏
  • 【独享数据集成资源组规格】 image.png

    【独享调度资源组规格】 image.png ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-01 16:04:52
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    阿里邮箱—安全高效集成 立即下载
    集成智能接入网关APP:优化企业级移动办公网络 立即下载
    云效助力企业集成安全到DevOps中 立即下载