DataWorks手动触发支持API 方式触发运行数据质量检测?调度触发仅调度完成后触发校验?两者的区别是,手工触发多了支持api方式触发?
DataWorks 的手动触发确实支持通过 API 方式来触发数据质量检测的运行,而调度触发则是在调度任务完成后自动触发校验。两者的主要区别在于手动触发提供了对 API 触发的支持,使得用户能够更加灵活地控制数据质量检测的执行时机和方式。
在运维中心中,当表关联的调度节点运行(执行节点代码逻辑)完成后,将会触发数据质量校验(将会产生一条校验 SQL 在底层执行)。DataWorks平台将会根据数据质量规则强弱和数据质量规则校验结果决定任务是否由于质量规则校验失败而退出,并阻塞下游节点执行,防止脏数据影响范围进一步扩大。
参考文档https://help.aliyun.com/zh/dataworks/user-guide/data-quality-overview-old?spm=a2c4g.11186623.0.i23
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。