大数据计算MaxCompute的datawork下面每个sql执行系统环境哪里可以配置?

大数据计算MaxCompute的datawork下面每个sql执行系统环境哪里可以配置? lQLPKGwQUWuWiHfNBB7NBxiw-FM0VYUybSoGgWLpaCgSAA_1816_1054.png

展开
收起
三分钟热度的鱼 2024-07-24 19:26:52 66 发布于安徽 分享
分享
版权
举报
1 条回答
写回答
取消 提交回答
  • 资深 C++与人工智能程序员。精通 C++,善用其特性构建稳健架构。在人工智能领域,深入研习机器学习算法,借 C++与 OpenCV 等实现计算机视觉应用,于自然语言处理构建文本处理引擎。以敏锐洞察探索技术融合边界,用代码塑造智能未来。

    在DataWorks中,MaxCompute的SQL执行系统环境配置与数据源和计算资源的绑定有关,以下是相关配置位置及方法:

    配置计算资源

    如果创建工作空间时选择了参加数据开发(Data Studio)(新版)公测,则需要为工作空间绑定计算资源。若未参加公测,需要创建数据源或注册集群。

    查看和修改执行环境配置

    登录DataWorks控制台,进入相应工作空间,点击左侧导航栏“数据开发与治理”下的“数据开发”。在数据开发界面中,右键单击业务流程,选择“新建节点” -> “MaxCompute” -> “ODPS SQL”创建SQL节点。在创建或编辑ODPS SQL节点时,虽然没有专门的系统环境配置界面,但任务会使用所在工作空间绑定的MaxCompute数据源及相应的计算资源作为执行环境。

    项目级属性配置

    一些项目级别的属性配置,如开启ACID属性、开启2.0数据类型等,可影响SQL执行环境。这些配置通常需要使用Project Owner账号在MaxCompute客户端执行相应命令来开启。

    资源组配置

    在数据集成任务等场景中,如果涉及到MaxCompute数据的读取或写入,需要配置资源组来确定任务执行所使用的计算资源。登录DataWorks控制台,进入数据集成页面,在新建同步任务的“网络与资源配置”区域,可以选择同步资源组。

    2025-03-31 18:33:53 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

还有其他疑问?
咨询AI助理
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等