开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute中odpssql运行日志中能看到是哪个资源组跑的吗?

大数据计算MaxCompute中odpssql运行日志中能看到是哪个资源组跑的吗?

展开
收起
真的很搞笑 2023-10-18 23:47:48 83 0
6 条回答
写回答
取消 提交回答
  • 月移花影,暗香浮动

    在MaxCompute中,您可以通过Logview页面查看到作业的运行状态、运行结果以及任务的细节和每个步骤的进度等信息。然而,该页面并未明确提供作业对应资源组的信息。

    如果您想查看具体作业与资源组的关联信息,可能需要结合实际操作进行推断。例如,当您通过MaxCompute客户端或MaxCompute Studio等非DataWorks渠道上传作业时,这些作业不会在数据开发面板显示,但会在MaxCompute资源面板中出现。因此,您可以在资源面板中查找并确认作业对应的资源组。

    总的来说,虽然MaxCompute的Logview页面并未直接提供作业对应资源组的信息,但您仍可以通过其他途径,如MaxCompute的资源面板等,间接获取此类信息。

    2023-10-20 11:00:10
    赞同 展开评论 打赏
  • 在MaxCompute中,你可以通过以下方法来查看odpssql运行日志中哪个资源组跑的:

    1. 使用MaxCompute的查询语句:你可以使用MaxCompute的查询语句来查询odpssql运行日志。例如,你可以这样写:
      SELECT * FROM odps_log WHERE log_type = 'odpssql' AND log_info LIKE '%resource_group%';
      

    在这个例子中,这个查询会返回odps_log表中所有odpssql运行日志中包含'resource_group'的记录。你可以通过查看这些记录,来找到哪个资源组跑的odpssql。

    1. 使用MaxCompute的API:你可以使用MaxCompute的API来查询odpssql运行日志。例如,你可以使用get_table_statistics API来获取odps_log表的统计信息。这个API会返回odps_log表中的所有odpssql运行日志。你可以通过查看这些记录,来找到哪个资源组跑的odpssql。
    2. 使用MaxCompute的控制台:你可以使用MaxCompute的控制台来查询odpssql运行日志。例如,你可以在控制台的"任务管理"页面中,查看所有odpssql运行日志。你可以通过查看这些记录,来找到哪个资源组跑的odpssql。
    2023-10-19 21:54:11
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    在阿里云大数据计算MaxCompute中,odpssql运行日志可能无法直接显示正在使用的资源组信息。您可以通过查看ODPS SQL任务的详细信息来获取相关资源组的信息。具体来说,您可以在DataWorks中配置ODPS SQL节点,用以定期调度MaxCompute的SQL任务,并完成与其他类型节点的任务协同。在执行ODPS SQL任务的过程中,节点的详细信息将会提供给您,包括其所在资源组等信息。

    2023-10-19 21:38:01
    赞同 展开评论 打赏
  • 在大数据计算MaxCompute中,由于资源组和项目之间的关联性,odpssql运行日志中并不能直接看到是哪个资源组跑的。资源面板中所列的资源并非一定与数据开发面板中的资源一致,只有当数据同时上传到MaxCompute,并提交或发布后,才会出现在MaxCompute资源面板中。因此,如果您想查看具体的资源组信息,可能需要在数据开发面板中进行查询。此外,DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成与其他类型节点的集成和联合调度。如果仍有疑问,建议您联系阿里云技术支持寻求帮助。

    2023-10-19 15:44:59
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    根据我找到的资料,ODPS SQL运行日志中应该能看到是哪个资源组跑的。您可以通过在日志中查找与资源组相关的提示信息,如“使用资源组”、“在资源组中运行”等来确定是哪个资源组运行的。

    2023-10-19 13:39:25
    赞同 展开评论 打赏
  • logview里看,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-10-19 08:17:26
    赞同 展开评论 打赏
滑动查看更多

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载