开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks这个错误怎么解决?

DataWorks这个错误怎么解决?failed: ODPS-0010000:System internal error - fuxi job failed, caused by: kWorkerOutOfMemory(errCode:256) at Odps/yxgs_dev_20240516095212342gpjib6l_SQL_0_1_0_job_0/R5_4@m11b01107.cloud.b19.am11#5.%20Detail%20error%20msg:%20KILL_NAKILL_NA:%20plannedResource({Memory=1536,%20SInstance=1,%20CPU=80})%20usedResource({Memory=14744,%20CPU=131})

展开
收起
夹心789 2024-05-20 22:30:45 62 0
1 条回答
写回答
取消 提交回答
  • 错误信息
    ODPS-0010000:System internal error - fuxi job failed, caused by: kWorkerOutOfMemory(errCode:256) at Odps/xxx/xxx. Detail error msg: KILL_NAKILL_NA: plannedResource({Memory=xxx, CPU=xxx}) usedResource({Memory=xxx, CPU=xxx})

    错误码描述
    实际使用的资源大于计划使用的资源导致内存超用被杀。

    解决方案
    通过报错信息中的plannedResource与usedResource可以识别出计划使用资源与实际使用资源的数量,您可以通过参数调大计划使用资源。报错信息中的Task类型分为M(mapper)、R(reducer)、J(joiner),您可以根据报错信息SET操作,如odps.stage.mapper.mem、odps.stage.mapper.split.size。

    image.png

    参考文档https://help.aliyun.com/zh/maxcompute/user-guide/odps-0010000-1?spm=a2c4g.254786.0.i3

    2024-06-15 14:33:52
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

热门讨论

热门文章

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载