离线同步mysql生产数据, 举例:数据过滤updated_at =当天 小时任务15点 开始到结束时间是15:01-15:11 其实同步过来的数据updated_at= 15:01-15:11期间的数据是漏掉一部分的 这是为什么
mysql reader是根据配置的column where等信息 拼接成sql 下发到reader执行 可以原句在mysql执行一下 读出来的数据是否符合预期 ;另外看下detail log里有没有打印脏数据 (此答案整理自DataWorks交流群(答疑@机器人))
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。