DataWorks中writeMode介绍是什么?

DataWorks中writeMode介绍是什么?

展开
收起
真的很搞笑 2023-06-17 14:34:33 201 分享 版权
1 条回答
写回答
取消 提交回答
  • 配置一个写入DRDS的数据同步作业,脚本开发的详情请参见通过脚本模式配置任务。{"type":"job","version":"2.0",//版本号。"steps":[{"stepType":"stream","parameter":{},"name":"Reader","category":"reader"},{"stepType":"drds",//插件名。"parameter":{"postSql":[],//执行数据同步任务之后执行的SQL语句。"datasource":"",//数据源。"column":[//列名。"id"],"writeMode":"insert ignore","batchSize":"1024",//一次性批量提交的记录数大小。"table":"test",//表名。"preSql":[]//执行数据同步任务之前执行的SQL语句。},"name":"Writer","category":"writer"}],"setting":{"errorLimit":{"record":"0"//错误记录数。},"speed":{"throttle":true,//当throttle值为flase时,mbps参数不生效,表示不限流;当throttle值为true时,表示限流。"concurrent":1, //作业并发数。"mbps":"12"//限流}},"order":{"hops":[{"from":"Reader","to":"Writer"}]}} https://help.aliyun.com/document_detail/137755.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-06-17 15:13:37
    赞同 展开评论

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理