备案控制台
探索云世界
开发者社区 大数据 文章 正文

Hive执行sql，报内存溢出

2017-11-13 2929
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 应用场景 搭建了hadoop伪分布式集群，并且在其上搭建了hive环境，但是在执行HQL语句的时候，老是报内存溢出，很麻烦，只需要简单设置，就可以解决该问题。

应用场景

搭建了hadoop伪分布式集群，并且在其上搭建了hive环境，但是在执行HQL语句的时候，老是报内存溢出，很麻烦，只需要简单设置，就可以解决该问题。

操作方案

运行程序过程中，报内存溢出：java.sql.SQLException: Error running query: java.lang.OutOfMemoryError: PermGen space

解决方案：
在/opt/hive-2.1.1/conf/hive-env.sh

export HADOOP_HEAPSIZE=102400
文章标签：
SQL
HIVE
分布式计算
Hadoop
关键词：
SQL hive
SQL内存溢出
SQL执行
wsc449
目录
相关文章
诸葛子房
|
4月前
|
SQL HIVE
Hive sql 执行原理
Hive sql 执行原理
诸葛子房
43 0
让线程再跑一会
|
4月前
|
SQL 分布式计算 数据挖掘
Hive SQL初级练习（30题）
Hive SQL初级练习（30题）
让线程再跑一会
256 0
热烈的马
|
4月前
|
SQL 存储 大数据
【大数据技术Hadoop+Spark】Hive基础SQL语法DDL、DML、DQL讲解及演示（附SQL语句）
【大数据技术Hadoop+Spark】Hive基础SQL语法DDL、DML、DQL讲解及演示（附SQL语句）
热烈的马
75 0
热烈的马
|
4月前
|
SQL 分布式计算 数据库
【大数据技术Spark】Spark SQL操作Dataframe、读写MySQL、Hive数据库实战（附源码）
【大数据技术Spark】Spark SQL操作Dataframe、读写MySQL、Hive数据库实战（附源码）
热烈的马
96 0
Want595
|
6月前
|
SQL 存储 大数据
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念
黑马程序员-大数据入门到实战-分布式SQL计算 Hive 语法与概念
Want595
76 0
阿里云瑶池数据库SelectDB
|
1月前
|
SQL 数据可视化 Apache
阿里云数据库内核 Apache Doris 兼容 Presto、Trino、ClickHouse、Hive 等近十种 SQL 方言，助力业务平滑迁移
阿里云数据库 SelectDB 内核 Doris 的 SQL 方言转换工具， Doris SQL Convertor 致力于提供高效、稳定的 SQL 迁移解决方案，满足用户多样化的业务需求。兼容 Presto、Trino、ClickHouse、Hive 等近十种 SQL 方言，助力业务平滑迁移。
阿里云瑶池数据库SelectDB
499 1
阿里云数据库内核 Apache Doris 兼容 Presto、Trino、ClickHouse、Hive 等近十种 SQL 方言，助力业务平滑迁移
诸葛子房
|
4月前
|
SQL 分布式计算 Hadoop
Hive SQL 优化
Hive SQL 优化
诸葛子房
50 1
yuanzhengme
|
4月前
|
SQL 存储 关系型数据库
Presto【实践 01】Presto查询性能优化（数据存储+SQL优化+无缝替换Hive表+注意事项）及9个实践问题分享
Presto【实践 01】Presto查询性能优化（数据存储+SQL优化+无缝替换Hive表+注意事项）及9个实践问题分享
yuanzhengme
90 0
demo123567
|
5月前
|
SQL Java 关系型数据库
hive中 sql执行过程
hive中 sql执行过程
demo123567
67 0
一乐乐
|
5月前
|
SQL JSON 分布式计算
常用的hive sql
常用的hive sql
一乐乐
46 0

热门文章

最新文章

  • 1
    利用Hive与Hadoop构建大数据仓库：从零到一
  • 2
    bigdata-17-Hive部署与Hive基础
  • 3
    【Hive】请说明hive中 Sort By，Order By，Cluster By，Distrbute By各代表什么意思？
  • 4
    【Hive】Hive优化有哪些？
  • 5
    【Hive】Hive的函数：UDF、UDAF、UDTF的区别？
  • 6
    【Hive】Hive有索引吗？
  • 7
    bigdata-18-Hive数据结构与存储格式
  • 8
    【Hive】Hive的两张表关联，使用MapReduce怎么实现？
  • 9
    【Hive】数据倾斜怎么解决？
  • 10
    bigdata-21-Hive基本函数
  • 1
    Oracle的PL/SQL游标属性：数据的“导航仪”与“仪表盘”
    27
  • 2
    sql 性能优化基于explain调优（二）
    11
  • 3
    Oracle的PL/SQL循环语句：数据的“旋转木马”与“无限之旅”
    10
  • 4
    Oracle的PL/SQL条件控制：数据的“红绿灯”与“分岔路”
    11
  • 5
    Oracle的PL/SQL表达式：数据的魔法公式
    13
  • 6
    Oracle的PL/SQL定义变量和常量：数据的稳定与灵动
    13
  • 7
    NL2SQL实践系列(2)：2024最新模型实战效果(Chat2DB-GLM、书生·浦语2、InternLM2-SQL等)以及工业级案例教学
    44
  • 8
    NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL）、新一代数据集BIRD-SQL解读
    41
  • 9
    如何在 Python 中进行 Web 应用程序的安全性管理，例如防止 SQL 注入？
    11
  • 10
    IDEA DataGrip连接sqlserver 提示驱动程序无法通过使用安全套接字层(SSL)加密与 SQL Server 建立安全连接的解决方法
    15

    • 相关课程

    更多
  • SQL完全自学手册
  • SQL Server on Linux入门教程
  • SQL入门与实践
  • 大数据Hive教程精讲
  • 数据库及SQL/MySQL基础
  • SQL进阶及查询

    • 相关电子书

    更多
  • SQL Server在电子商务中的应用与实践
  • GeoMesa on Spark SQL
  • 原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili

    • 相关实验场景

    更多
  • PolarDB for AI：在数据库中通过SQL实现AI能力
  • 玩转MaxCompute SQL! 30分钟搞定数据分析挖掘
  • 使用SQL语句实现数据表管理
  • 使用SQL语句实现数据插入、修改和删除操作
  • 使用SQL语句实现数据查询操作
  • 使用SQL语句管理索引
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）