AI 助理
备案控制台
开发者社区 问答 正文

Hive优化设计的方式有哪些？

Hive优化设计的方式有哪些？

展开
收起
游客daliwbfb2wo66 2021-12-07 15:55:06 366 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客k7rjnht6hbtk6

    1.使用分区表、桶表

    2.使用索引

    3.使用适当的文件格式，如orc, avro, parquet

    4.使用适当的压缩格式，如snappy

    5.考虑数据本地化 - 增加一些副本

    6.避免小文件

    7.使用Tez引擎代替MapReduce

    8.使用Hive LLAP(在内存中读取缓存)

    9.考虑在不需要时关闭并发

    2021-12-07 15:56:16
    赞同 展开评论
问答分类：
SQL HIVE
问答标签：
Hive优化
问答地址：
开发者社区 > 数据库 > 问答
相关问答
在处理流维表JOIN时，面对Hive大维表导致的OOM问题，采取了哪些优化措施？
129
2
0
阿里云E-MapReduce如果hive改不了，oss本身能优化吗？
191
1
0
Flink写hive，按分钟分区，在使用-s恢复数据时出现堆溢出的问题，有啥优化的办法吗？
300
1
0
Flink sql读取hive性能慢，请问有优化的方案吗？
1066
1
0
Hive优化中合并小文件是什么？
362
1
0
Hive优化中排序是什么？
377
1
0
Hive优化中数据倾斜是什么？
312
1
0
Hive优化中Combiner聚合是什么？
614
1
0
Hive优化中分组是什么？
359
1
0
Hive优化中多个group by合并是什么？
483
1
0