开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks这是个什么情况呢?

DataWorks这是个什么情况呢,怎么全部任务卡着了,我看正在运行的任务都是用独享资源的呀,有空余资源为什么不运行呢?image.png

展开
收起
真的很搞笑 2023-11-13 11:28:20 32 0
3 条回答
写回答
取消 提交回答
  • DataWorks中任务卡住无法运行可能有多种原因。即使有空闲资源,任务也可能因为以下情况而无法正常运行:

    1. 下游节点定时时间问题:例如,如果下游B节点的定时时间为0点,父节点A2、A3都已经执行成功,但由于当前B节点使用的调度资源组下资源不够,就会导致任务没有调度资源,从而使得B任务无法运行。

    2. 任务运行条件限制:任务运行需要满足多个条件,包括调度资源、定时时间以及上游节点运行状况等。只有当所有条件都满足时,任务才会被触发运行。

    3. 孤立节点问题:如果任务没有挂在_root下,那么这个孤立的任务节点是不会运行的。

    4. 实例状态问题:被提交发布至生产环境的任务,会按照调度周期来产生实例。如果实例的状态异常,也可能导致任务无法正常运行。

    2023-11-30 16:55:20
    赞同 展开评论 打赏
  • 找到等待资源的实例 右键 运行诊断看下具体是哪个资源组 以及占用资源组的任务列表image.png
    ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-11-13 16:05:52
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    如果DataWorks的任务卡住了,可能有很多原因:

    1. 资源不足:即使独享资源仍有剩余,但如果任务太多或任务需要大量的资源,则可能会出现资源不足的情况。此时可以考虑减少任务的数量或降低单个任务的资源需求。
    2. 系统繁忙:DataWorks在高负载的情况下可能会出现卡顿现象,可以考虑联系技术支持或专业的技术人员,以帮助解决问题。
    3. 其他原因:还有其他原因可能导致任务卡住,例如代码问题、网络问题等。建议您仔细分析日志或其他相关证据,找出根本原因并加以解决。
    2023-11-13 14:10:53
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载