数据集成日志显示WAIT,说明数据集成任务执行资源组,剩余资源不够当前任务执行。
场景示例
例如,若选择的资源组规格为4C8G,最大支持8个并发同时执行,若当前存在3个并发为3的任务,其中2个任务同时执行,那么机器剩余的并发为2,此时另一个并发为3的任务,将由于资源组剩余资源不够,当前任务执行而出现等待资源的情况。
相关文档
● 离线任务调优。
当你看到数据集成同步任务显示wait的时候,那就说明你的同步任务处于等待执行资源状态,也就是说当前数据集成任务执行资源组剩余资源不够当前任务执行。
此时就需要考虑任务调优了。
比如:可以通过运行诊断页面查看当前任务等待资源时,哪些任务占用资源,及资源占用情况;检查占用资源的任务是否卡主或者严重变慢,如果任务存在问题需要先解决此类问题或者停掉部分任务;如果任务未卡住,待占用该数据集成任务执行资源的任务执行成功,将资源释放后启动运行;也可以找到占用该资源的任务列表及责任人,与其协调降低任务并发数;还可以减少当前同步任务的并发数并重新提交发布任务;还支持对任务执行资源组进行扩容。扩缩容操作参考官方文档:https://help.aliyun.com/document_detail/428411.htm
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。