开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

现在创建Ddataworks后,绑定MacCompute要先创建数据源了么?

现在创建Ddataworks后,绑定MacCompute要先创建数据源了么?image.png

展开
收起
真的很搞笑 2023-10-17 11:14:25 64 0
7 条回答
写回答
取消 提交回答
  • 对的 需要先创建数据源,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-10-18 18:18:08
    赞同 展开评论 打赏
  • 月移花影,暗香浮动

    在DataWorks中,创建工作空间后,您需要为该工作空间绑定MaxCompute引擎,然后将MaxCompute计算引擎项目绑定至DataWorks,作为DataWorks的底层计算引擎。DataWorks支持多种绑定MaxCompute引擎的模式,包括新增MaxCompute项目、绑定已有MaxCompute项目或绑定外部项目。

    当您使用自建的MaxCompute数据源时,如果DataWorks项目没有绑定MaxCompute引擎,将无法创建MaxCompute SQL节点,从而导致全量同步标done节点创建失败。因此,绑定MaxCompute引擎是DataWorks项目能否成功创建并正常运行的必要步骤。

    此外,数据源可以分为两类:一类是引擎绑定时自动生成的引擎数据源,例如绑定MaxCompute引擎后,将在数据源管理页面默认新增名为odps_first的数据源;另一类是通过在数据源管理页面新增数据源方式添加至DataWorks的外接数据源。

    2023-10-18 10:40:38
    赞同 展开评论 打赏
  • 在DataWorks中,创建数据源和绑定MacCompute是两个不同的步骤,它们可以分别进行,也可以同时进行。通常情况下,你可以在创建DataWorks后,再创建数据源和绑定MacCompute。
    以下是创建DataWorks和创建数据源以及绑定MacCompute的步骤:

    1. 创建DataWorks:在DataWorks管理控制台中,点击“创建DataWorks”,然后按照提示进行操作。
    2. 创建数据源:在DataWorks管理控制台中,选择“数据开发”->“数据源”,然后按照提示进行操作。
    3. 绑定MacCompute:在DataWorks管理控制台中,选择“数据开发”->“MacCompute”,然后按照提示进行操作。
    2023-10-17 21:38:56
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在 DataWorks 中,MacCompute 是用于运行 MaxCompute 任务的计算引擎。在绑定 MacCompute 前,您需要先创建一个数据源,以便将源数据导入到 MaxCompute 表中或从 MaxCompute 表导出数据。

    以下是一般情况下创建 MacCompute 和数据源的步骤:

    1. 创建数据源:

      • 在 DataWorks 控制台左侧导航栏,选择“数据集成”。
      • 点击“新建数据源”按钮,选择合适的数据源类型,如 RDS、OSS 等。
      • 根据数据源类型填写相关配置信息,包括数据库连接信息、认证信息等。
      • 完成配置后,点击保存并测试,确保数据源能够正常连通。
    2. 绑定 MacCompute:

      • 在 DataWorks 控制台左侧导航栏,选择“任务开发”。
      • 点击需要绑定 MacCompute 的项目,进入项目详情页面。
      • 在页面顶部导航栏选项卡中,选择“计算引擎”。
      • 点击“绑定计算引擎”按钮,选择 MacCompute,并填写相关配置信息。
      • 确认配置无误后,保存并测试绑定的计算引擎。
    2023-10-17 18:38:33
    赞同 展开评论 打赏
  • 在 DataWorks 中,创建数据源通常是在创建数据集成任务之前进行的。这是因为数据源是数据集成任务的输入和输出,因此需要先创建数据源才能进行数据集成任务的创建和配置。
    在您创建 DataWorks 项目后,如果要绑定 MacCompute 服务,通常需要先创建数据源,然后在数据集成任务中配置 MacCompute 服务。在配置 MacCompute 服务时,您需要提供 MacCompute 服务的访问密钥和安全组信息,以确保 DataWorks 可以访问和使用 MacCompute 服务。

    2023-10-17 15:34:40
    赞同 展开评论 打赏
  • 绑定MaxCompute引擎
    https://help.aliyun.com/zh/dataworks/user-guide/associate-a-maxcompute-compute-engine-with-a-workspace?spm=a2c4g.11186623.0.i52

    前提条件
    已拥有DataWorks空间管理员权限。详情请参见添加及管理工作空间成员。
    已将RAM用户(子账号)添加为工作空间成员:如果需要将RAM用户添加为生产环境访问身份,您需要先将其添加至该工作空间成员列表,详情请参见添加及管理工作空间成员。
    背景信息
    (必读)请您在操作引擎绑定前务必了解以下内容,这将决定您后续是否可以顺利开展数据开发工作。
    引擎绑定注意事项(重点)。
    必读:简单模式和标准模式的区别。
    功能介绍
    您可通过以下方式为DataWorks工作空间绑定MaxCompute引擎项目。
    如果您需要为工作空间绑定新的MaxCompute项目,您可以选择为当前工作空间创建MaxCompute项目。
    简单模式工作空间支持为DataWorks工作空间绑定已有MaxCompute引擎。
    为当前工作空间已绑定的MaxCompute项目构建湖仓一体项目,详情请参见MaxCompute湖仓一体概述。

    2023-10-17 14:39:22
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在DataWorks中,绑定MacCompute后,可以先创建数据源,也可以在创建数据流时直接绑定MacCompute。这是因为,DataWorks提供了数据流级别的MacCompute绑定功能,可以在创建数据流时直接绑定MacCompute,而不需要先创建数据源。

    当你在创建数据流时,可以在“数据源”页面中选择“MacCompute”作为数据源类型,然后在“MacCompute”页面中配置MacCompute的参数,如实例类型、实例数量、存储类型等。在配置完成后,就可以将MacCompute绑定到数据流中了。

    如果你已经创建了数据源,也可以在数据源页面中选择“MacCompute”作为数据源类型,然后在“MacCompute”页面中配置MacCompute的参数,将MacCompute绑定到数据源中。然后在创建数据流时,选择该数据源作为数据源,就可以将MacCompute绑定到数据流中了。

    总的来说,绑定MacCompute的方式取决于你的需求和操作习惯。你可以根据实际情况选择适合自己的方式。

    2023-10-17 13:01:59
    赞同 展开评论 打赏
滑动查看更多

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载