开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

请问DataWorks中可以查询单表的操作日志吗?或者单表的数据量近一个月的变化,那里没有临时查询的

请问DataWorks中可以查询单表的操作日志吗?或者单表的数据量近一个月的变化,那里没有临时查询的dml sql的日志

展开
收起
真的很搞笑 2023-07-01 13:13:49 100 0
3 条回答
写回答
取消 提交回答
  • 在 DataWorks 中,你可以查询单表的操作日志和数据量的变化。以下是两种常用的方法:

    1. 操作日志:DataWorks 提供了操作日志功能,记录了对于表的一些操作,比如创建、修改、删除等。你可以通过以下步骤查看单表的操作日志:

      • 登录 DataWorks 控制台,并选择相应的项目和工作空间。
      • 在左侧导航栏中选择“运维中心”>“操作日志”。
      • 在操作日志页面,你可以使用搜索框输入表名或其他关键词来筛选相关的操作日志。

      请注意,操作日志并不会记录具体的 DML(数据操作语言)SQL 语句的执行记录,而仅仅是记录了表级别的操作信息。

    2. 数据量变化:如果你想了解单表在近一个月内的数据量变化情况,可以使用 DataWorks 的数据开发功能结合自定义的 SQL 来实现。以下是一种基本的方法:

      • 在数据开发中创建一个 ODPS SQL 或 MaxCompute SQL 节点。
      • 编写适当的 SQL 查询语句,使用聚合函数和日期函数来统计并显示表的数据量变化。
      • 将查询结果输出到指定的目标表中,以便后续分析和查看。

      通过这种方式,你可以运行这个节点来获取表的数据量变化信息,并将结果保存在指定的表中,以备查询和分析。

    请注意,以上方法是一般性的指导,具体操作可能因 DataWorks 版本和配置而有所不同。在使用数据开发功能时,请确保你具有足够的权限来执行相应的操作,并遵循正确的流程进行操作。

    2023-07-31 21:52:45
    赞同 展开评论 打赏
  • 北京阿里云ACE会长

    在DataWorks中,可以查询单表的操作日志和数据量变化情况。以下是不同的查询方式:

    查询单表的操作日志:
    在DataWorks中,可以通过DataWorks控制台中的“操作日志”功能来查询单表的操作日志。具体步骤如下:

    (1)进入DataWorks控制台,选择需要查询的项目空间。

    (2)在项目空间中选择需要查询的数据表,然后进入数据表的详情页。

    (3)在数据表详情页中,选择“操作日志”选项卡,可以查看该表的操作日志,包括创建、修改、删除等操作。

    查询单表的数据量变化情况:
    在DataWorks中,可以通过DataWorks控制台中的“数据开发”功能来查询单表的数据量变化情况。具体步骤如下:

    (1)进入DataWorks控制台,选择需要查询的项目空间。

    (2)在项目空间中选择需要查询的数据表,然后进入数据表的详情页。

    (3)在数据表详情页中,选择“数据血缘”选项卡,可以查看该表的数据血缘关系。

    (4)在数据血缘关系中,可以查看该表的数据量变化情况,包括数据来源、数据去向以及数据量等信息。如果需要查看近一个月的数据量变化情况,可以在数据血缘关系中选择“时间范围”筛选条件,并设置时间范围为一个月。

    需要注意的是,以上查询方式均可在DataWorks控制台中临时进行查询,但需要具备足够的权限才能查看相关信息。如果您需要进行更复杂的查询或分析操作,可以通过DataWorks中的数据开发和数据分析等功能来实现。

    2023-07-31 17:42:11
    赞同 展开评论 打赏
  • 数据地图可以参考看看image.png 数据地图仅有调度产出的信息 可以咨询下mc同学看看 有没有其他方法 在群公告可以找到,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-07-01 13:19:27
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载