开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

MySQL 单表周期离线同步场景配置任务时,创建同步任务有哪些步骤?

已解决

MySQL 单表周期离线同步场景配置任务时,创建同步任务有哪些步骤?

展开
收起
甜甜的嘻嘻嘻 2022-08-16 17:06:19 598 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    1.新建业务流程:进入 DataWorks DataStudio(数据开发)页面,选中已存在业务流程或新建业务流程。

    2.创建离线同步节点:选中离线任务所属的业务流程,单击右键,新建“离线同步”节点。

    3.设置数据来源:设置数据源类型、数据源名称、待同步源表、数据过滤规则和切分键。数据过滤规则支持数据源 SQL 的 where 过滤语句和 DataWorks的调度系统参数。切分键用于并发同步时数据分片使用,为提升效率建议使用主键或索引键,支持类型为数值型。设置完毕后可以点击“数据预览”键查看预览数据。

    4.设置数据去向:设置数据源类型、数据源名称(MaxCompute 数据类型可以使用绑定引擎时默认建立的 odps_first 数据源)和目标表等参数。

    5.配置字段的映射关系:选择数据来源和数据去向后,需要指定读取端和写入端列的映射关系。您可以选择同名映射、同行映射、取消映射或自动排版。

    6.配置通道控制:配置完成上述操作后,请进行通道控制。

    以上内容摘自《全链路数据治理-全域数据集成》电子书,点击https://developer.aliyun.com/ebook/download/7707可下载完整版

    2022-08-16 17:10:54
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
搭建电商项目架构连接MySQL 立即下载
搭建4层电商项目架构,实战连接MySQL 立即下载
PolarDB MySQL引擎重磅功能及产品能力盛大发布 立即下载

相关镜像