能帮忙看一下大数据计算MaxCompute这个任务为什么运行两个多小时还没有结束吗?资源也是够得。我现在终止重新运行了Log view:
http://logview.odps.aliyun.com/logview/?h=http://service.cn.maxcompute.aliyun-inc.com/api&p=paiwo_smart&i=20231128031059383gbjfeg821uv3&token=TGV4V3IwUkMxUTJ4ZENUU1JISUI4ekpwT0tFPSxPRFBTX09CTzpwNF8yNTUxMDA4MzA0NjI1NTE5OTcsMTcwMzczMzA2MCx7IlN0YXRlbWVudCI6W3siQWN0aW9uIjpbIm9kcHM6UmVhZCJdLCJFZmZlY3QiOiJBbGxvdyIsIlJlc291cmNlIjpbImFjczpvZHBzOio6cHJvamVjdHMvcGFpd29fc21hcnQvaW5zdGFuY2VzLzIwMjMxMTI4MDMxMDU5MzgzZ2JqZmVnODIxdXYzIl19XSwiVmVyc2lvbiI6IjEifQ==
根据您提供的Log view链接,我无法直接查看任务的执行情况。但是,我可以给您一些建议来帮助您诊断和解决问题:
检查任务日志:在Log view中,您可以查看任务的详细日志,以获取有关任务执行过程的信息。这可以帮助您找到可能导致任务运行时间过长的原因。
监控资源使用情况:MaxCompute提供了丰富的监控工具,如监控仪表板、告警通知等。您可以使用这些工具实时监控系统资源的使用情况,以便及时发现并解决潜在的问题。
调整任务配置:根据任务的实际需求,您可以尝试调整任务的配置,例如增加内存分配、调整并发度等。这有助于提高任务的执行效率。
重新提交任务:如果任务仍然无法在预期的时间内完成,您可以尝试重新提交任务。在提交任务时,请确保任务配置正确,并注意避免重复提交相同的任务。
目前看上去数据量不大,只是阶段较多,不至于这么慢。怀疑是计算资源问题,可以在MaxCompute控制台看下当时任务执行阶段,预付费quota是否够用
计算资源满了可以在作业运维界面看一下11:00-13:40之前哪些作业在占用着资源。可以再看一下当前时间,计算资源充足的话,这个任务重跑一下我理解会正常
看一下目前的资源使用情况,单独这个任务可能已经打满了资源了,资源不够用,从14:30-目前的
,此回答整理自钉群“MaxCompute开发者社区2群”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。