DataWorks某一条具体的脏数据信息嘛 我想取数据库看看 那个字段有多长 现在 那个日志被截取了 我看不到关键信息?
对于DataWorks中的脏数据,您可以通过以下步骤进行查看和定位:
增大脏数据限制条数,扩大阈值,容忍脏数据。源端脏数据仍存在,不同步到目的端,日志会显示脏数据记录,任务不会报错。
根据运行日志定位源端脏数据,修复后再同步。
如果遇到特定问题,如时间格式导致报错脏数据,需要根据报错原因,调整同步应如何解析该时间格式的数据。
您可以在同步任务配置时指定脏数据产生条数,控制是否允许脏数据产生。
如果想要查看被截取的关键信息,可以在日志中搜索关键字段(如错误码或关键字)。在 DataWorks 中也可以尝试采用以下两种方式:
如果 DataWorks 日志被截取了,您可以采取以下措施来查看具体的脏数据信息:
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。