DataWorks数据集成holo的时候主键冲突导致少数据
已解决DataWorks数据集成holo的时候主键冲突导致少数据
展开
收起
1
条回答
写回答
写回答
-
推荐回答官方回答源表和目标表的主键不一样。用户任务上设置的写holo的conflictMode是ignore，也就是数据在写入holo的时候主键冲突，数据会忽略掉 不写入。
源端的数据用目标端的pk去group by查询一下count，源端表查询select count(*) from (select xxxxx from xxx group by xxx) ，然后源端的数据数量，要用目标端的pk去重再统计，统计出来的才是会写入目标端的数量。（因为目标端配了冲突就丢弃）。
2022-12-09 15:17:02赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
数据服务报429请求次数过多咋办呀
1190
移动运维里dataworks控制台没有权限了怎么办？
89
DataWorks我该如何访问A项目安装了项目的package资源？
533
数据来源：com.alibaba.fastjson.JSONException: syntax er
3167
DataWorks在运维界面批量修改调度资源组，报错了，如何解决？
76
DataWorks只能单独跑是吗，运维中心补数据能批量吗？
70
DataWorks cross-database references are not ？
766
DataWorks生产节点今天总报：FAILED: 重跑就又可以？
558
Dataphin和 Dataworks 有啥区别呢？
808
请问执行sql时报错quota not enough,请问是什么问题
1606
展开全部
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
25861
DataWorks售前咨询
5500
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
7631
欢迎加入飞天大数据平台交流群
2353
大数据公共数据集上线，免费试用TB级数据分析
6501
大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
71850
【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
58283
欢迎加入DataWorks产品钉钉交流群
36117
智能风控未来已来
5076
DataWorks百问百答69：有哪些数据集成报错（数据集成报错归类）？
9471
展开全部
相关文章
相关电子书
更多
