DataWorks我现在集群的所有实例都没有任何运行,为什么我提交一个手动业务流程执行一个节点资源还需要等待呢?
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
这种情况可能是DataWorks内部节点资源不足导致。可以按以下步骤排查:
首先登录DataWorks控制台,查看SERVICE ADMIN - 服务管理是否存在异常警告。
查看作业监控,查看具体的那个节点资源不足。
查看作业运行日志,是否显示资源申请失败。
查看作业配置,是否选择了足够的线程数 和执行内存。优化配置。
5.登录DataWorks管理控制台,查看各节点CPU利用率和内存利用率。确保还有剩余资源。
如果所有节点资源几乎被占用,可以升级您的DataWorks实例,增加节点数量。
可以暂停部分作业,释放部分资源。
提供更多信息分析:
作业ID
节点资源类型:MR 、SPARK等
部分作业运行日志
作业配置信息
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。