开发者社区> 问答> 正文

DataWorks数据集成holo的时候主键冲突导致少数据

已解决

DataWorks数据集成holo的时候主键冲突导致少数据

展开
收起
提个问题 2024-06-13 14:11:01 29 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    源表和目标表的主键不一样。用户任务上设置的写holo的conflictMode是ignore,也就是数据在写入holo的时候主键冲突,数据会忽略掉 不写入。
    源端的数据用目标端的pk去group by查询一下count源端表查下select count(*) from (select xxxxx from yyyy group by oooo) a然后源端的数据数量,要用目标端的pk去重再统计,统计出来的才是会写入目标端的数量。(因为目标端配了冲突就丢弃)。

    2024-06-13 14:11:02
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载

相关实验场景

更多