开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute调度的运行情况 怎么导出?

大数据计算MaxCompute调度的运行情况 怎么导出?
比如:每个实例对象的 调度时间、开始运行时间、结束运行时间、运行时长

展开
收起
真的很搞笑 2023-11-05 15:52:41 54 0
3 条回答
写回答
取消 提交回答
  • 直接导出是没有办法,有api可以获取到每个实例的详细信息,可以看下这里
    https://help.aliyun.com/zh/dataworks/developer-reference/api-getinstance,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-11-07 23:16:22
    赞同 展开评论 打赏
  • 要导出MaxCompute任务的调度运行情况,您可以使用MaxCompute提供的日志功能。以下是导出任务调度运行情况的步骤:

    1. 登录到MaxCompute控制台。
    2. 在左侧导航栏中,选择您要查看的任务所在的项目。
    3. 展开项目后,找到您要查看的任务。
    4. 点击任务名称进入任务详情页面。
    5. 在任务详情页面中,找到"日志"选项卡。
    6. 在日志选项卡中,您可以查看任务的运行日志和错误信息。
    7. 若要导出任务调度运行情况,您可以选择需要导出的日志行范围,然后点击"下载"按钮进行导出。
    2023-11-06 11:12:59
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在MaxCompute中,可以通过编写SQL语句查询实例调度和运行的情况,并将结果导出到其他地方。以下是一个示例:

    SELECT instance_id AS "Instance ID", start_time AS "Start Time", end_time AS "End Time", DATE_DIFF(end_time, start_time, 'MINUTE') AS "Duration (Minutes)"
    FROM sys.odps_instance WHERE project_name = 'your_project_name';
    

    在这段SQL中,instance_id 表示实例ID,start_timeend_time 分别表示开始时间和结束时间,DATE_DIFF 函数用来计算两个日期之间的差值(分钟)。最后,将查询结果保存到CSV文件或其他数据源中即可。

    2023-11-05 16:03:48
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载