DataWorks独享资源组开通、使用教程

本文涉及的产品
大数据开发治理平台DataWorks,Serverless资源组抵扣包300CU*H
简介: 模式介绍:DataWorks提供了独享资源模式,支持购买独享的机器资源来分配给工作空间运行任务。此模式下机器物理资源(网络/磁盘/CPU/内存等)完全独享,不单可以做到用户间资源使用的隔离,也可以做到不同工作空间任务使用资源的独立。

模式介绍:
DataWorks提供了独享资源模式,支持购买独享的机器资源来分配给工作空间运行任务。此模式下机器物理资源(网络/磁盘/CPU/内存等)完全独享,不单可以做到用户间资源使用的隔离,也可以做到不同工作空间任务使用资源的独立。此外,独享资源也支持灵活的扩容、缩容功能。可满足资源独享、灵活配置的需要。

独享资源使用入口
进入DataWorks管控台,在“资源列表”中,可以找到“独享资源”Tab,如下图所示:
image
图一:独享资源列表

购买独享资源
DataWorks独享资源采用预付费包年包月的方式购买。主要购买入口有以下两个:
• 产品详情页入口
• 新建独享资源入口(见下文)
购买页如下图所示,请按照实际需要选择合适的地域、资源类型、规则、数量和有效时间。请特别注意独享资源不支持跨地域使用,即华东2(上海)地域的独享资源,只能给华东2(上海)地域的工作空间使用。
image
图二:独享资源售卖页

新增独享资源
在独享资源列表,点击“新增独享资源”按钮可新增独享资源。如图一所示。点击后,进行必要配置信息填写和选择:
image

配置项说明:
• 资源类型:资源的使用类型。独享资源分为“独享调度资源”和“独享数据集成资源”两种,分别用于通用任务调度和数据集成同步任务专用
• 资源名称:用以区别资源的一个名称,租户唯一,请避免重复
• 资源备注:用以对资源进行简单描述
• 订单号:此处选择购买的独享资源订单,若尚未购买,可以点击“购买”链接跳转到售卖页进行购买
• 可用区:单个地域提供了不同机器的可用区,请按照需要进行选择即可

配置完成后点击创建即可新建出独享资源。独享资源环境初始化需要几分钟到十几分钟不等的时间,请耐心等待状态更新为“运行中”。
image
image

查看和操作独享资源
独享资源创建完成之后,在列表中可以查看独享资源的基本信息和进行操作。
基本信息说明
• 到期时间:与独享资源购买订单中选定时间相关。指独享资源的有效期。到期前可以进行续费,若到期后未续费,状态会变成过期,独享资源不能被新任务使用;过期后可以进行激活,若超过七天为激活,独享资源会被释放。
• 资源数:购买的资源个数
• 资源使用率:用以表达资源的使用水位情况,即负载,百分比。

资源操作-扩容
若独享资源使用率过高,不能满足实际使用需要,可以点击此按钮进行资源配置变更,调大资源数量来进行扩容:
image

资源操作-缩容
与缩容类似,当独享资源出现闲置不使用的情况,可以对资源进行缩容:
image

资源操作-续费
点击“续费”按钮,可以延长独享资源的到期时间
image

资源操作-专有网络绑定
独享资源部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络(VPC)网络打通,需要进行专有网络绑定操作。点击“专有网络绑定”按钮,可以进入到“专有网络绑定”页面。需要注意的是,需要进行RAM授权,让DataWorks拥有对您的云资源相应的访问权限。

• RAM授权
image

按提示操作,同意授权即可
image

• 新增专有网络
授权完成后,点击“新增绑定”可以添加一个新的专有网络绑定。请安要求配置必要信息:
image

绑定成功后,如果信息发生变化。可以重新进行绑定,但当前暂不支持解绑。
image

资源操作-修改归属工作空间
独享资源要被任务真正使用,需要绑定归属的工作空间。支持将一个独享组员分配给多个工作空间使用,如下图:
image

使用独享资源
独享资源绑定到工作空间之后,即可在工作空间中,配置将任务分配到特定的独享资源上使用
• 独享调度资源:
在运维中心,选中任务之后,可以修改任务运行资源,如下图所示:
image
image

• 独享数据集成资源:
数据集成任务在配置时支持选择运行资源,如下图:
image
image

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始,十ー年里一直支持阿里巴巴集团内部数据中台的建设,2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks,承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示,学员可以一边学习一边进行实际操作,可以深入了解DataWorks各大模块的使用方式和具体功能,让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解,加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
相关文章
|
3月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之出现等待资源是什么原因
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
数据采集 运维 DataWorks
DataWorks产品使用合集之Serverless资源组与旧版资源组对比有什么区别
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
运维 DataWorks 安全
DataWorks产品使用合集之任务日志中显示等待gateway调度资源,该如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
数据采集 DataWorks 安全
DataWorks产品使用合集之按量付费高峰期抢占资源是什么意思
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
弹性计算 DataWorks 安全
成本最高可降40%!揭秘DataWorks资源组的Serverless进化之路
阿里云DataWorks为数据仓库/数据湖/湖仓一体等解决方案提供智能一站式开发治理平台能力。其中在资源组Serverless化方面,DataWorks实现了重大突破,不仅提高了资源利用率与灵活性,还降低了成本。DataWorks通过升级资源组管理模式,解决了传统资源组存在的复杂计费、资源利用率低等问题。Serverless资源组实现了资源的自动管理和分配,确保任务调度效率,并通过统一资源配额管理实现资源的高效利用和平滑扩缩。此外,容器运行时技术保障了数据和任务的安全隔离。Serverless资源组具备通用性强、付费形式灵活、支持运行中扩缩容等优势,有效提升了用户体验与安全性。
270 10
成本最高可降40%!揭秘DataWorks资源组的Serverless进化之路
|
3月前
|
数据采集 缓存 DataWorks
DataWorks产品使用合集之如何查看剩余资源
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
DataWorks 监控 安全
DataWorks产品使用合集之project的资源使用情况该如何查看
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
SQL DataWorks 安全
DataWorks产品使用合集之调度资源组与集成资源内部的实例如何进行共用
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
4月前
|
SQL 分布式计算 DataWorks
DataWorks产品使用合集之使用API调用ODPS SQL时,出现资源被定时任务抢占,该怎么办
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
3月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之公共集成资源组如何切换独享资源
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
下一篇
无影云桌面