DataWorks独享资源组开通、使用教程

本文涉及的产品
大数据开发治理平台 DataWorks,不限时长
简介: 模式介绍:DataWorks提供了独享资源模式,支持购买独享的机器资源来分配给工作空间运行任务。此模式下机器物理资源(网络/磁盘/CPU/内存等)完全独享,不单可以做到用户间资源使用的隔离,也可以做到不同工作空间任务使用资源的独立。

模式介绍:
DataWorks提供了独享资源模式,支持购买独享的机器资源来分配给工作空间运行任务。此模式下机器物理资源(网络/磁盘/CPU/内存等)完全独享,不单可以做到用户间资源使用的隔离,也可以做到不同工作空间任务使用资源的独立。此外,独享资源也支持灵活的扩容、缩容功能。可满足资源独享、灵活配置的需要。

独享资源使用入口
进入DataWorks管控台,在“资源列表”中,可以找到“独享资源”Tab,如下图所示:
image
图一:独享资源列表

购买独享资源
DataWorks独享资源采用预付费包年包月的方式购买。主要购买入口有以下两个:
• 产品详情页入口
• 新建独享资源入口(见下文)
购买页如下图所示,请按照实际需要选择合适的地域、资源类型、规则、数量和有效时间。请特别注意独享资源不支持跨地域使用,即华东2(上海)地域的独享资源,只能给华东2(上海)地域的工作空间使用。
image
图二:独享资源售卖页

新增独享资源
在独享资源列表,点击“新增独享资源”按钮可新增独享资源。如图一所示。点击后,进行必要配置信息填写和选择:
image

配置项说明:
• 资源类型:资源的使用类型。独享资源分为“独享调度资源”和“独享数据集成资源”两种,分别用于通用任务调度和数据集成同步任务专用
• 资源名称:用以区别资源的一个名称,租户唯一,请避免重复
• 资源备注:用以对资源进行简单描述
• 订单号:此处选择购买的独享资源订单,若尚未购买,可以点击“购买”链接跳转到售卖页进行购买
• 可用区:单个地域提供了不同机器的可用区,请按照需要进行选择即可

配置完成后点击创建即可新建出独享资源。独享资源环境初始化需要几分钟到十几分钟不等的时间,请耐心等待状态更新为“运行中”。
image
image

查看和操作独享资源
独享资源创建完成之后,在列表中可以查看独享资源的基本信息和进行操作。
基本信息说明
• 到期时间:与独享资源购买订单中选定时间相关。指独享资源的有效期。到期前可以进行续费,若到期后未续费,状态会变成过期,独享资源不能被新任务使用;过期后可以进行激活,若超过七天为激活,独享资源会被释放。
• 资源数:购买的资源个数
• 资源使用率:用以表达资源的使用水位情况,即负载,百分比。

资源操作-扩容
若独享资源使用率过高,不能满足实际使用需要,可以点击此按钮进行资源配置变更,调大资源数量来进行扩容:
image

资源操作-缩容
与缩容类似,当独享资源出现闲置不使用的情况,可以对资源进行缩容:
image

资源操作-续费
点击“续费”按钮,可以延长独享资源的到期时间
image

资源操作-专有网络绑定
独享资源部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络(VPC)网络打通,需要进行专有网络绑定操作。点击“专有网络绑定”按钮,可以进入到“专有网络绑定”页面。需要注意的是,需要进行RAM授权,让DataWorks拥有对您的云资源相应的访问权限。

• RAM授权
image

按提示操作,同意授权即可
image

• 新增专有网络
授权完成后,点击“新增绑定”可以添加一个新的专有网络绑定。请安要求配置必要信息:
image

绑定成功后,如果信息发生变化。可以重新进行绑定,但当前暂不支持解绑。
image

资源操作-修改归属工作空间
独享资源要被任务真正使用,需要绑定归属的工作空间。支持将一个独享组员分配给多个工作空间使用,如下图:
image

使用独享资源
独享资源绑定到工作空间之后,即可在工作空间中,配置将任务分配到特定的独享资源上使用
• 独享调度资源:
在运维中心,选中任务之后,可以修改任务运行资源,如下图所示:
image
image

• 独享数据集成资源:
数据集成任务在配置时支持选择运行资源,如下图:
image
image

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
1月前
|
DataWorks 机器人 调度
DataWorks的集成任务并发度设置主要影响的是**调度资源组**。
【2月更文挑战第34天】DataWorks的集成任务并发度设置主要影响的是**调度资源组**。
13 1
|
1月前
|
SQL 分布式计算 DataWorks
DataWorks常见问题之dataworks数据同步时无法显示独享资源组如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
DataWorks 安全 关系型数据库
DataWorks常见问题之使用公共数据集成资源组进行同步失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
分布式计算 DataWorks 定位技术
DataWorks常见问题之资源组选择失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
SQL 分布式计算 DataWorks
DataWorks常见问题之maxcompute资源打开失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
分布式计算 DataWorks 数据建模
DataWorks常见问题之如何批量修改集成资源组
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
32 1
|
1月前
|
消息中间件 DataWorks 关系型数据库
DataWorks的独享资源数据集成
DataWorks的独享资源数据集成
12 1
|
1月前
|
数据采集 分布式计算 DataWorks
DataWorks常见问题之dataworks引用maxcompute资源失败如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
|
1月前
|
DataWorks NoSQL 数据库
DataWorks常见问题之如何上传资源
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
33 2
|
1月前
|
SQL 分布式计算 DataWorks
DataWorks常见问题之买多了一台独立集成资源组没找到释放入口如何解决
DataWorks是阿里云提供的一站式大数据开发与管理平台,支持数据集成、数据开发、数据治理等功能;在本汇总中,我们梳理了DataWorks产品在使用过程中经常遇到的问题及解答,以助用户在数据处理和分析工作中提高效率,降低难度。
32 7