开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks跨主账号数据源采集有哪些方式?

dataworks跨主账号数据源采集有哪些方式?

展开
收起
滴滴滴~ 2023-03-29 13:51:31 143 0
2 条回答
写回答
取消 提交回答
  • 使用数据集成可以同步,网络联通参考 。 此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-03-29 20:50:13
    赞同 展开评论 打赏
  • 随心分享,欢迎友善交流讨论:)

    DataWorks 跨主账号数据源采集有以下三种方式:

    1.通过数据集成(Data Integration)进行跨主账号数据源采集:需要在源账号和目标账号分别创建数据集成任务,然后在数据集成控制台进行任务配置,包括源端连接、目标端连接、同步对象等信息。

    2.通过数据集成的服务提供方功能进行跨主账号数据源采集:数据集成服务提供方(Data Integration Service Provider)是一个独立的云服务,可以在该服务中创建连接源账号和目标账号的数据集成任务。同时,目标账号需要在 DataWorks 中创建同步任务,并将数据源指向数据集成服务提供方。

    3.通过数据集成的数据管道(MaxCompute Tunnel)进行跨主账号数据源采集:数据管道是阿里云 MaxCompute 针对跨账号数据传输提供的一种高速、稳定、安全的数据传输方案。可以在数据管道控制台中创建数据传输任务,将源端数据传输到目标账号中,然后在 DataWorks 中创建同步任务,将数据源指向传输到目标账号中的数据表。

    需要注意的是,以上三种方式都需要在目标账号中开通相应的服务。同时,在进行跨主账号数据源采集时,需要确保源账号和目标账号间的授权关系已经建立,并且账号间的网络互通已经打通。

    2023-03-29 14:07:15
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

    相关实验场景

    更多