阿里云Dataworks RestAPI数据源离线数据同步Quick Start

Step By Step

主要操作步骤

1、Open API中快速测试接口；
2、创建独享数据集成资源组；
3、Dataworks创建离线数据集成任务；
4、测试运行，查看写入表的情况。

一、Open API中快速测试接口

1、OnsRegionList API说明

2、Open API快速测试地址

二、创建独享数据集成资源组

1、独享数据集成资源组的创建参考下面链接资源组创建部分
Dataworks实时数据同步(Kafka -> maxcompute)

注意： 因为是通过公网访问API，本部分不对VPC做特殊限制。

三、Dataworks创建离线数据集成任务

1、配置RestApi数据源

2、创建maxcompute数据表

CREATE TABLE IF NOT EXISTS from_restapi(key1 STRING,key2 STRING,key3 STRING);

3、配置离线数据同步任务
1、配置数据源 + 字段映射

2、提取Json结果示例

四、测试运行，查看写入表的情况

更多参考

配置RestAPI数据源
RestAPI Reader
Dataworks实时数据同步(Kafka -> maxcompute)