开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks数据地图这里的变更记录,对于OSS的外部表,所有的历史记录都会捕获到嘛?

DataWorks数据地图这里的变更记录,对于OSS的外部表,所有的历史记录都会捕获到嘛?哪怕我drop掉了重建都可以嘛?image.png

展开
收起
cuicuicuic 2023-11-20 05:02:59 583 0
3 条回答
写回答
取消 提交回答
  • 可以看到部分在dataworks上调度任务产出的ddl 这里不是完整的哈 drop后整张表都看不到了,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-11-20 21:34:24
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks 数据地图可以捕获 OSS 外部表的所有变更记录。即使您 drop 掉重建也会捕获到相应的变更记录,从而能够追踪外部表的变更情况。
    此外,您也可以通过 DataWorks 自带的日志功能来监控外部表的变化,以便更好地理解您的外部表变化情况。

    2023-11-20 15:36:41
    赞同 展开评论 打赏
  • DataWorks数据地图的变更记录功能可以捕获OSS外部表的所有历史变更,包括表结构的修改以及数据内容的更新。这种机制意味着,即使您使用"drop"命令删除了表然后重新创建,所有的这些操作都会被记录下来。这对于数据的追踪和审计是非常有用的,可以帮助您了解这个表的历史版本,以及每次变更前后的具体信息。同时,结合数据地图的元数据详情查看、数据预览、数据血缘和数据类目管理等功能,您可以更加方便地理解和使用数据。

    2023-11-20 11:52:37
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载