开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中如何配置mysql数据库中的同步节点?

DataWorks中如何配置mysql数据库中的同步节点?

展开
收起
cuicuicuic 2023-05-13 09:49:22 82 0
1 条回答
写回答
取消 提交回答
  • 本节将新建一个同步节点write_result并进行配置,目的是把表result_table中的数据写入至自己的MySQL数据库中。具体操作如下:切换至数据开发面板,新建一个离线同步节点write_result。设置write_result节点的上游节点为insert_data节点。选择数据源(ODPS > odps_first)、表(result_table)为数据来源。选择您新建的MySQL数据源中的表(odps_result)为数据去向。image.png image.png 选择字段的映射关系,左侧的源头表字段和右侧的目标表字段为一一对应关系。在通道控制区域,配置作业速率上限和脏数据检查规则。image.png 参数 描述 任务期望最大并发数 数据同步任务内,可以从源并行读取或并行写入数据存储端的最大线程数。向导模式通过界面化配置并发数,指定任务所使用的并行度。 同步速率 设置同步速率可以保护读取端数据库,以避免抽取速度过大,给源库造成太大的压力。同步速率建议限流,结合源库的配置,请合理配置抽取速率。 错误记录数 错误记录数,表示脏数据的最大容忍条数。预览保存。完成上述配置后,上下滚动鼠标即可查看任务配置。确认无误后,单击工具栏中的image.png 图标。 https://help.aliyun.com/document_detail/85555.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-05-13 10:30:47
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    搭建电商项目架构连接MySQL 立即下载
    搭建4层电商项目架构,实战连接MySQL 立即下载
    PolarDB MySQL引擎重磅功能及产品能力盛大发布 立即下载

    相关镜像