DataWorks数据地图这里的变更记录,对于OSS的外部表,所有的历史记录都会捕获到嘛?哪怕我drop掉了重建都可以嘛?
可以看到部分在dataworks上调度任务产出的ddl 这里不是完整的哈 drop后整张表都看不到了,此回答整理自钉群“DataWorks交流群(答疑@机器人)”
DataWorks 数据地图可以捕获 OSS 外部表的所有变更记录。即使您 drop 掉重建也会捕获到相应的变更记录,从而能够追踪外部表的变更情况。
此外,您也可以通过 DataWorks 自带的日志功能来监控外部表的变化,以便更好地理解您的外部表变化情况。
DataWorks数据地图的变更记录功能可以捕获OSS外部表的所有历史变更,包括表结构的修改以及数据内容的更新。这种机制意味着,即使您使用"drop"命令删除了表然后重新创建,所有的这些操作都会被记录下来。这对于数据的追踪和审计是非常有用的,可以帮助您了解这个表的历史版本,以及每次变更前后的具体信息。同时,结合数据地图的元数据详情查看、数据预览、数据血缘和数据类目管理等功能,您可以更加方便地理解和使用数据。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。