开发者社区> 问答> 正文

MaxCompute中如何处理small table exceeds memory limi...

已解决

MaxCompute中如何处理small table exceeds memory limit(MB) xxx报错

展开
收起
提个问题 2024-06-12 16:08:12 6 0
1 条回答
写回答
取消 提交回答
  • 开发者社区问答官方账号
    官方回答
    采纳回答
    MaxCompute中报错ODPS-0010000:System internal error - fuxi job failed, caused by: Hash Join Cursor ConditionalMapJoin1#0 small table exceeds, memory limit(MB) xxx, fixed memory used xxx, string memory used xxx, complex type memory used xxx为小表使用内存超过限制。常为两种场景:
    1、使用了mapjoin hint:需要检查mapjoin对应的表的存储是否超过限制,可以通过调整odps.sql.mapjoin.memory.max(0 MB~8192 MB),若表内存超过8192 MB,则需要去除 mapjoin hint。
    2、未使用mapjoin hint:产品侧优化SQL指定使用mapjoin,可通过set odps.optimizer.cbo.rule.filter.black=hj;关闭自动mapjoin。
    2024-06-12 16:08:13
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据AI一体化的解读 立即下载
极氪大数据 Serverless 应用实践 立即下载
大数据&AI实战派 第2期 立即下载