开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

我们是独立资源组,在资源充足的情况下(只用了40%)任务完成需要很长的时间这是为什么?

我们是独立资源组,在资源充足的情况下(只用了40%)任务完成需要很长的时间(平时需要20分钟,今天下午需要两个小时),请问这是什么原因

展开
收起
游客6vdkhpqtie2h2 2022-09-15 11:02:54 2611 0
4 条回答
写回答
取消 提交回答
  • 十分耕耘,一定会有一分收获!

    这个问题,楼主可以查看一下日志,然后找一下哪个任务耗时较长,然后优化一下代码逻辑,看看是否可行。

    2022-10-27 12:09:49
    赞同 展开评论 打赏
  • 会的都会,不会的催也不会

    资源使用充足,就需要排查考虑网络问题和任务内部的问题了

    2022-10-25 17:38:24
    赞同 展开评论 打赏
  • 可以看一下耗时比较长的任务日志,看任务是否一直处在等待资源的状态还是说是长尾问题,这可能不是资源的问题而是代码优化的问题

    2022-10-24 14:35:34
    赞同 展开评论 打赏
  • 亚马逊云科技合作伙伴解决方案架构师,亚马逊云科技User Group Leader,多年云计算经验,csdn/阿里云等平台优质作者,亚马逊云科技社区建设者,亚马逊云科技培训与认证云领袖合作作者,专注于云计算、云原生领域。

    你好, 看看日志排除下问题 在资源调用方面是否没有充分调用资源,只是部分资源在调用?

    2022-10-24 12:36:18
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
动态、高效,蚂蚁动态卡片的内核逻辑 立即下载
《用管控策略设定多账号组织全局访问边界》 立即下载
《阿里云资源保障服务,让您从容应对资源波峰》 立即下载