开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

DataWorks如何实现一键maxcompute数据同步?

DataWorks如何实现一键maxcompute数据同步?

展开
收起
cuicuicuic 2023-11-06 12:48:53 61 0
2 条回答
写回答
取消 提交回答
  • 登录阿里云官网。新建一键MaxCompute数据同步节点。进入Hologres管理控制台。鼠标悬停至顶部菜单栏左侧的image.png
    图标,选择目标地域。在实例列表 > Hologres引擎管理页面,单击前往DataWorks-HoloStudio开发。在Holo Studio页面的左侧导航栏,单击image.png
    图标。进入数据开发页面,鼠标悬停至顶部菜单栏的image.png
    图标。单击一键MaxCompute数据同步。在新建节点对话框中,输入节点名称,并选择目标文件夹和数据库。单击提交。在编辑节点页面,配置各项参数。image.png
    参数 描述
    外部表来源
    外部表表名字 已创建的外部表表名称。 Hologres中创建的外部表用于映射MaxCompute数据,需要与导入数据的MaxCompute表结构一一对应。
    目标库 Hologres的数据库名称。
    目标Schema 当前数据库的Schema名称。 如果您没有新建Schema,则只能选择默认创建的public。如果有新建的Schema,您也可以选择新建的Schema。
    目标表名 需要导入数据的表名称。
    目标表描述 目标表的信息描述。
    同步字段 需要导入的MaxCompute表字段。 您可以选择导入部分或全部字段。
    分区配置 需要导入的分区字段。 一键MaxCompute数据同步功能仅支持导入一级分区。如果您需要导入多级分区,请在SQL Console中使用SQL语句实现,详情请参见SQL Console。
    索引配置 您可以为目标表创建索引,详情请参见设置表属性。
    SQL Script 自动解析当前可视化操作对应的SQL
    https://help.aliyun.com/document_detail/162734.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-11-07 20:40:44
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    您可以使用 DataWorks 中的 MaxCompute 数据同步功能,实现一键数据同步。具体而言,您可以按照以下步骤操作:

    1. 登录 DataWorks 控制台,选择您要操作的项目。
    2. 单击“数据集成” > “新建任务” > “MaxCompute 到 MaxCompute”。
    3. 设置源端和目标端 MaxCompute 数据源。
    4. 配置同步规则和映射关系。
    5. 单击“保存”按钮,完成数据同步任务的创建。

    完成上述操作后,您只需单击“启动任务”按钮即可实现一键 MaxCompute 数据同步。

    2023-11-06 13:15:44
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载