开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute中log文件去哪查看呢?

大数据计算MaxCompute中log文件去哪查看呢?

展开
收起
真的很搞笑 2024-03-04 10:12:01 64 0
4 条回答
写回答
取消 提交回答
  • 直接查看日志就行了。

    MaxCompute中,您提交的SQL、Spark和MapReduce任务在执行时会被实例化,以MaxCompute实例(下文简称为实例或Instance)的形式存在。这个实例代表了该任务从开始执行到完成的整个生命周期,并包含了任务的各种运行信息,如任务ID、开始时间、结束时间、运行状态、日志等。

    实例会经历运行(Running)和结束(Terminated)两个阶段。

    运行阶段的实例状态为Running(运行中),而结束阶段则会有Success(成功)、Failed(失败)和Cancelled(被取消)三种状态。您可以根据运行任务时MaxCompute给出的实例ID进行查询、改变任务的状态等操作,示例如下。

    status instance_id;
    -停止某实例,将其状态设置为Cancelled。
    kill instance_id; 
    -查看某实例的运行日志。
    wait instance_id;
    

    其中,instance_id为需要查询的实例ID号,请您根据实际的ID号进行替换。

    参考https://help.aliyun.com/zh/maxcompute/product-overview/task-instance?spm=a2c4g.11186623.0.i50

    2024-03-17 08:43:24
    赞同 1 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在大数据计算MaxCompute中,可以通过Logview工具来查看作业的日志文件。

    Logview是MaxCompute平台上用于查看和调试任务的工具。通过Logview,用户可以查看任务的运行状态,包括排队情况、资源使用情况,以及每个节点上实例运行的细节和进度。当任务出错或运行时间过长时,Logview可以帮助分析具体原因,从而对任务进行优化。

    要查看Logview,您可以在MaxCompute Studio中找到作业实例详情,并通过Logview URL或本地的Logview离线文件以只读方式打开作业详情。这种方式是查看作业详细信息的常用方法。

    总之,Logview是诊断和解决MaxCompute任务问题的重要工具,通过它可以获得任务执行的详细信息,帮助用户更好地理解和优化任务执行过程。

    2024-03-04 14:00:22
    赞同 展开评论 打赏
  • show tables看运行日志 ,此回答整理自钉群“MaxCompute开发者社区2群”

    2024-03-04 10:40:41
    赞同 展开评论 打赏
  • MaxCompute的任务日志可以通过阿里云控制台查看,登录MaxCompute管理界面后,可以在对应任务的详情页中找到日志查看功能。另外,也可以使用命令行工具odpscmd进行日志查询和下载。

    2024-03-04 10:38:20
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    PostgresChina2018_赖思超_PostgreSQL10_hash索引的WAL日志修改版final 立即下载
    Kubernetes下日志实时采集、存储与计算实践 立即下载
    日志数据采集与分析对接 立即下载