开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

您好,麻烦问一下大数据计算MaxCompute,数据地图表详情里表的产出任务,需要在哪里配置才可以?

您好,麻烦问一下大数据计算MaxCompute,数据地图表详情里表的产出任务,需要在哪里配置才可以查询的到?

展开
收起
cuicuicuic 2023-08-13 11:12:03 45 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    在大数据计算MaxCompute中,数据地图表详情中的表产出任务信息是通过元数据管理系统进行维护和展示的。要确保表的产出任务能够在数据地图表详情中查询到,需要进行以下配置:

    表描述(Table Comment):在创建或修改表时,为表设置描述信息。描述信息应包含对表的产出任务的描述,以便其他用户能够理解该表的来源和生成过程。

    例如,在创建表时可以使用如下语句设置表描述:

    sql
    Copy
    -- 创建表并设置描述信息
    CREATE TABLE my_table (
    column1 STRING,
    column2 INT
    ) COMMENT '这个表由任务A生成';

    
    任务描述(Task Comment):在创建或修改任务时,为任务设置描述信息。描述信息应包含任务的目的、生成的表以及其他相关信息。
    
    例如,在创建任务时可以使用如下语句设置任务描述:
    
    sql
    Copy
    -- 创建任务并设置描述信息
    CREATE TASK my_task AS
    BEGIN
      -- 任务逻辑
    END COMMENT '这个任务用于生成表my_table';
    

    元数据管理系统:MaxCompute的元数据管理系统(如DataWorks或DataHub)应正确配置和使用。元数据管理系统负责收集、存储和展示表和任务的元数据信息,包括表的产出任务信息。

    确保将表和任务的元数据信息正确注册到元数据管理系统中,并配置相应的权限和访问控制,以确保用户能够查询到表的产出任务信息。

    2023-08-13 22:46:59
    赞同 展开评论 打赏
  • 我理解应该是需要这样,离线同步任务配置调度 + 节点输出表,调度跑起来 + ‘t+1’才有,再看看流程呢a8c530ade3902f316764240740a3c174.png
    ,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-08-13 11:58:10
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载
    大数据&AI实战派 第2期 立即下载