AI 助理
备案控制台
开发者社区 问答 正文

在ODPS中，如何手动调整小表内存参数来保障mapjoin生效？

在ODPS中，如何手动调整小表内存参数来保障mapjoin生效？

展开
收起
夹心789 2024-06-06 18:35:30 175 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 呆呆宝

    在ODPS中，可以通过设置odps.sql.mapjoin.memory.max参数来调整小表内存限制。例如，set odps.sql.mapjoin.memory.max=2048表示将小表内存限制设置为2048M。根据小表的实际大小，可以适当调整这个参数来确保mapjoin能够生效。

    2024-06-06 19:14:59
    赞同 1 展开评论
问答分类：
分布式计算 MaxCompute 云原生大数据计算服务 MaxCompute
问答标签：
内存参数 云原生大数据计算服务 MaxCompute参数 云原生大数据计算服务 MaxCompute内存 odps内存 云原生大数据计算服务 MaxCompute mapjoin
问答地址：
开发者社区 > 大数据 > 问答
相关问答
在大数据计算MaxCompute中，这个hash join 内存超了的问题是什么场景产生的？
85
2
0
大数据计算MaxCompute这种mapjoin构建hash table时间很长，有什么优化方向吗?
64
1
0
如何将py文件资源传入ODPS DataFrame的map/apply方法的resources参数？
279
2
0
flinkcdc出现OOM之后，我调整过内存参数。 请教下这个问题该从哪方面排查 ？
71
1
0
在大数据计算MaxCompute中，内存限制为8g，能够突破吗？
63
1
0
在大数据计算MaxCompute中，为什么hash join 内存超了？
57
1
0
在大数据计算MaxCompute中内存是map和reduce或者join阶段的内存吗？
40
0
0
在大数据计算MaxCompute一个SQL节点运行多个SQL语句，是所有SQL语句共用一个内存？
60
0
0
在Filebeat的配置中，如何设置内存队列的参数以增加吞吐？
127
1
0
PolarDB内存水位较高，如果将参数query_cache_type调整为on ，会有所改善吗？
67
1
0