开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompute我点击logview上的M 任务,他只是显示一个total的,是吗?

大数据计算MaxCompute我点击logview上的M 任务,他只是显示一个total的,你的意思是其底层的5个instance分别的读取速度不一,是吗?

展开
收起
真的很搞笑 2023-12-03 19:27:32 60 0
3 条回答
写回答
取消 提交回答
  • 是的,你的理解是正确的。在MaxCompute中,如果一个任务被分成了多个子任务(也称为Instance),那么这些子任务的执行状态和进度会在LogView中显示出来。在每个子任务的旁边,会有一个"M"按钮,点击这个按钮,可以看到这个子任务的详细日志。

    在这些子任务中,可能会有一些子任务的读取速度比其他子任务慢。这可能是由于数据分布不均匀,或者是由于硬件资源分配不均等原因导致的。你可以通过查看这些子任务的日志,来找出导致这些问题的原因。

    2023-12-04 16:52:01
    赞同 展开评论 打赏
  • 是的 ,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-12-04 08:06:25
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    当你点击Logview上的M任务时,它应该显示该任务的所有Instance信息,包括每个Instance当你点击Logview上的M任务时,它应该显示该任务的所有Instance信息,包括每个Instance的URL链接、项目、InstanceID、提交人、开始时间、结束时间和状态等。如果只显示了一个"total",可能是由于某些原因导致部分信息未能正确获取。

    关于你提到的底层5个instance的读取速度不一的问题,理论上,MaxCompute设计上支持并行处理,所有的任务Instance应该是并行运行的。然而,由于任务间的依赖关系和特定任务类型的特性,可能会导致单个任务的执行时间超过预期。

    2023-12-03 21:18:33
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载