AI 助理
备案控制台
开发者社区 问答 正文

Hive优化本地模式是什么？

Hive优化本地模式是什么？

展开
收起
芯在这 2021-12-11 23:26:28 355 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 真的很搞笑

    本地模式(小任务)

    job的输入数据大小必须小于参数： hive.exec.mode.local.auto.inputbytes.max(默认128MB)

    job的map数必须小于参数：hive.exec.mode.local.auto.tasks.max(默认4)

    job的reduce数必须为0或者1

    hive.exec.mode.local.auto.inputbytes.max=134217728

    hive.exec.mode.local.auto.tasks.max=4

    hive.exec.mode.local.auto=true

    hive.mapred.local.mem：本地模式启动的JVM内存大小

    2021-12-11 23:26:55
    赞同 展开评论
问答分类：
SQL HIVE
问答标签：
Hive优化
问答地址：
开发者社区 > 数据库 > 问答
相关问答
DataWorks中Hive兼容模式时 DECIMAL，小数部分位数超出？
238
1
0
MaxCompute中主账号修改hive兼容模式失败these commands can no...
88
0
0
在处理流维表JOIN时，面对Hive大维表导致的OOM问题，采取了哪些优化措施？
129
2
0
DataWorks通过脚本模式配置离线同步任务，从Hive同步数据到HBase，是参数位置不对吗？
92
1
0
DataWorks离线同步hive插件向导模式报错“获取表列表失败...GET_TABLELI...
102
1
0
阿里云E-MapReduce如果hive改不了，oss本身能优化吗？
191
1
0
flink批模式查一张几千万的hive到另一个hive表，一下子起了1000的并行度，怎么降下来？
320
2
0
Flink写hive，按分钟分区，在使用-s恢复数据时出现堆溢出的问题，有啥优化的办法吗？
301
1
0
DataWorks离线同步hive插件向导模式报错“获取表列表失败...GET_TABLELIST
290
1
0
为什么在Hive中普遍使用读模式呢？
1613
1
0