大数据计算MaxCompute的datawork下面每个sql执行系统环境哪里可以配置?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
在DataWorks中,MaxCompute的SQL执行系统环境配置与数据源和计算资源的绑定有关,以下是相关配置位置及方法:
配置计算资源
如果创建工作空间时选择了参加数据开发(Data Studio)(新版)公测,则需要为工作空间绑定计算资源。若未参加公测,需要创建数据源或注册集群。
查看和修改执行环境配置
登录DataWorks控制台,进入相应工作空间,点击左侧导航栏“数据开发与治理”下的“数据开发”。在数据开发界面中,右键单击业务流程,选择“新建节点” -> “MaxCompute” -> “ODPS SQL”创建SQL节点。在创建或编辑ODPS SQL节点时,虽然没有专门的系统环境配置界面,但任务会使用所在工作空间绑定的MaxCompute数据源及相应的计算资源作为执行环境。
项目级属性配置
一些项目级别的属性配置,如开启ACID属性、开启2.0数据类型等,可影响SQL执行环境。这些配置通常需要使用Project Owner账号在MaxCompute客户端执行相应命令来开启。
资源组配置
在数据集成任务等场景中,如果涉及到MaxCompute数据的读取或写入,需要配置资源组来确定任务执行所使用的计算资源。登录DataWorks控制台,进入数据集成页面,在新建同步任务的“网络与资源配置”区域,可以选择同步资源组。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。
你好,我是AI助理
可以解答问题、推荐解决方案等
评论
全部评论 (0)