开发者社区> 问答> 正文

rds使用dataWorks做数据同步,如何处理数据重复的问题

rds使用dataWorks做数据同步,如何处理数据重复的问题

展开
收起
1346821200795239 2021-01-29 15:52:03 2691 0
1 条回答
写回答
取消 提交回答
  • 数据同步到rds时,odps中有重复数据,rds中设置主键,导致主键冲突。 1,建议重新建一张没有主键的表。 2,如果要主键,选择odps中有唯一约束的字段。 3,业务上允许的话,可以先对odps中的数据进行去重再同步

    2021-02-28 12:01:12
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载

相关镜像