问题一:DataWork中收到了数据质量报警怎么才能快速定位触发的业务流程节点呢?
DataWork中收到了数据质量报警怎么才能快速定位触发的业务流程节点呢?
参考回答:
DataWork中收到了数据质量报警能快速定位触发的业务流程节点的方法是在数据质量-任务查询界面,找到报警对应的节点ID,再去到运维中心查询即可。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/378927?spm=a2c6h.14164896.0.0.39087b009oi9oc
问题二:DataWork中的离线系统里的数据会如何写入呢?
DataWork中的离线系统里的数据会如何写入呢?
参考回答:
DataWork中离线质量校验:离线校验是在图形化界面上的。以MaxCompute表数据监控为例,首先选择一张表,然后定义一个特殊对象值,叫分区表达式。在离线系统里,数据都会分次写到不同的分区当中,大部分情况下分区与时间或业务日期有关联,因此最新的数据一般只会写到最新的分区中,定义分区表达式的目的就是为了限定质量监控范围。,这样每次只扫描最新分区就可以了。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/378813?spm=a2c6h.14164896.0.0.39087b009oi9oc
问题三:DataWork是通过什么对敏感数据进行识别的呢?
DataWork是通过什么对敏感数据进行识别的呢?
参考回答:
敏感数据识别:
通过用户自定义规则,自动识别敏感数据,并标记对应的级别。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/378307?spm=a2c6h.14164896.0.0.39087b009oi9oc
问题四:DataWork中进行日志大数据分析时如何提高了工作效率?
DataWork中进行日志大数据分析时如何提高了工作效率?
参考回答:
提高工作效率:
将日志数据同步至MaxCompute,通过SQL语句进行分析与处理,提高工作效率。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/378261?spm=a2c6h.14164896.0.0.39087b009oi9oc
问题五:DataWork中可以在数据清洗层和加工层实现什么功能?
DataWork中可以在数据清洗层和加工层实现什么功能?
参考回答:
在数据清洗层和加工层,一般会增加对清洗逻辑的监控,对数据的重复性和唯一性进行监控,比如在join或者分组的时候出现重复数据的可能性。
关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/378896?spm=a2c6h.14164896.0.0.39087b009oi9oc