Hive的标准调优清单，我们可以对照着来做我们的查询优化！
Hive Tuning(五) 标准调优清单
2016-09-08
1973
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
Hive的标准调优清单，我们可以对照着来做我们的查询优化！
目录
相关文章
|
SQL
大数据
HIVE
|
SQL
数据处理
HIVE
HIVE的数据倾斜调优
hive数据倾斜主要是由shuffle引起的，而引起shuffle的又主要有四种情况，分别为：
1.group by
2.join
3.count(distinct)
4.开窗函数
408
8
8
|
SQL
分布式计算
Java
|
SQL
存储
JSON
|
SQL
缓存
JSON
|
SQL
存储
负载均衡
工作常用之Hive 调优【四】HQL 语法优化
列裁剪就是在查询时只读取需要的列，分区裁剪就是只读取需要的分区。当列很多或者数据量很大时，如果 select * 或者不指定分区，全列扫描和全表扫描效率都很低。
419
0
0
|
存储
SQL
分布式计算
工作常用之Hive 调优【三】 Explain 查看执行计划及建表优化
在查询时通过 WHERE 子句中的表达式选择查询所需要的指定的分区，这样的查询效率会提高很多，所以我们需要把常常用在 WHERE 语句中的字段指定为表的分区字段。
593
0
0
|
SQL
分布式计算
负载均衡
如何从语法与参数层面对Hive进行调优
作为企业Hadoop应用的核心产品，Hive承载着FaceBook、淘宝等大佬95%以上的离线统计，很多企业里的离线统计甚至全由Hive完成，如电商、金融等行业。Hive在企业云计算平台发挥的作用和影响愈来愈大。因此，如何优化提速已经显得至关重要。
257
0
0
|
SQL
机器学习/深度学习
存储
|
SQL
存储
分布式计算
热门文章
最新文章
1
HIVE的安装配置、mysql的安装、hive创建表、创建分区、修改表等内容、hive beeline使用、HIVE的四种数据导入方式、使用Java代码执行hive的sql命令
2
有Mysql数据库的情况下为什么要用Hive？
3
hive get_json_object解析json结果为null咋办？
4
hive0.13 cli启动缓慢问题
5
Hadoop2.7实战v1.0之Hive-2.0.0+MySQL本地模式安装
6
Hive常见语句及函数
7
Hive【环境搭建 01】【hive-3.1.2版本 安装配置】【含 mysql-connector-java-5.1.47.jar 网盘资源】【详细】
8
Spark与Hive的集成与互操作
9
hive shell 导入数据
10
Flume-NG + HDFS + HIVE 日志收集分析
1
网易云信 x Doris：降本70%、提速11倍， 统一 ES/InfluxDB/Hive 多技术栈的落地实践
252
2
大数据新视界 --大数据大厂之Hive与大数据融合：构建强大数据仓库实战指南
356
3
Hive的基础操作指南
308
4
分布式存储数据恢复—hbase和hive数据库数据恢复案例
209
5
【YashanDB知识库】DataX迁移Hive到崖山分布式
142
6
【YashanDB知识库】Hive 命令工具insert崖山数据库报错
112
7
【YashanDB 知识库】Hive 命令工具 insert 崖山数据库报错
196
8
【YashanDB知识库】hive初始化崖山报错YAS-04209
101
9
【YashanDB知识库】hive初始化崖山报错YAS-04209
91
10
Dataphin功能Tips系列（48)-如何根据Hive SQL/Spark SQL的任务优先级指定YARN资源队列
226