开发者社区> 仔仔930628> 正文

Hive2安装详解

简介: Hive2安装详解
+关注继续查看
  1. 解压hive安装包
    Tar -zxvf apache-hive-2.1.1-bin.tar.gz
  2. 安装mysql,使用yum命令自动安装

      将mysql的connector到hive的lib目录下

    启动MySQL,service mysqld start

修改mysql密码:
Mysql -u root
Use mysql;
Update user set password=password(‘newpass’) where user=’root’;
Flush privileges;
Grant all privileges . to ‘root’%’ identified by ‘newpass’ with grant optiomn;
FLUSH PRIVILEGES;

  1. 配置环境变量
    Vim /etc/profile
HIVE

export HIVE_HOME=/home/zhouwang/apache-hive-2.1.1-bin
export HIVE_CONF_HOME=$HIVE_HOME/conf
export PATH=:$PATH:$HIVE_HOME/bin

  1. 配置hive,conf/hive-site.xml
    进入conf目录,将原有的文件重命名

cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml
cp hive-log4j2.properties.template hive-log4j2.properties
cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties
修改的hive-site.xml

  1. hive.downloaded.resources.dir
  2. hive.server2.logging.operation.log.location
  3. javax.jdo.option.ConnectionURL=>jdbc:mysql://192.168.56.101:3306/hive?createDatabaseIfNotExist=true
  4. javax.jdo.option.ConnectionDriverName=>com.mysql.jdbc.Driver
  5. javax.jdo.option.ConnectionUserName
  6. javax.jdo.option.ConnectionPassword
  7. hive.metastore.schema.verification=>false
  8. hive.metastore.warehouse.dir=>/user/hive/warehouse
  9. hive.server2.thrift.port=>10000(默认有可能冲突)
  10. hive.metastore.uris=>thrift://node1:9083
  11. hive.querylog.location=>/user/hive/log
  12. hive.exec.scratchdir=>/user/hive/tmp

hive.metastore.schema.verification
hive.metastore.uris 这两个参数是配置远程matestore的,要启动hiveserver2必须要配置此参数

将所有${system:user.name}替换为自己的用户名XX,将所有${system:java.io.tmpdir}替换为/zhouwang/apache-hive-2.1.1-bin/tmp

  1. 修改hive-env.sh
    加入

export HADOOP_HOME=/home/zhouwang/hadoop-2.7.4
export HIVE_CONF_DIR=/home/zhouwang/apache-hive-2.1.1/conf
export HIVE_AUX_JARS_PATH=/home/zhouwangl/apache-hive-2.1.1/lib

  1. 使用Hadoop新建hdfs目录
    Hadoop fs -mkdir -p /user/hive/warehouse

Hadoop fs -mkdir -p /user/hive/tmp
Hadoop fs -mkdir -p /user/hive/log
Hadoop fs -chmod -R 777 /user/hive

  1. 对mysql数据库机型初始化
    Schematool -initSchema -dbType mysql
  2. 启动远程服务
    Hive --service metastore &

Hive –service hiveserver2 &

  1. 所遇问题
    Beeline连接hiveserver2的时候出现java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.authorize.AuthorizationException): User zhouwang is not allowed to impersonate anonymous.

需要在hadoop配置文件core-site.xml中加入如下配置项:

hadoop.proxyuser.zhouwang.hosts
*


hadoop.proxyuser.zhouwang.groups
*

Hadoop.proxyuser.zhouwang.hosts配置项名称中zhouwang部分为报错User中的用户名部分.

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

相关文章
Hive2安装详解
Hive2安装详解
1619 0
阿里云服务器如何登录?阿里云服务器的三种登录方法
购买阿里云ECS云服务器后如何登录?场景不同,阿里云优惠总结大概有三种登录方式: 登录到ECS云服务器控制台 在ECS云服务器控制台用户可以更改密码、更换系.
29846 0
阿里云服务器如何登录?阿里云服务器的三种登录方法
购买阿里云ECS云服务器后如何登录?场景不同,大概有三种登录方式:
13904 0
阿里云服务器端口号设置
阿里云服务器初级使用者可能面临的问题之一. 使用tomcat或者其他服务器软件设置端口号后,比如 一些不是默认的, mysql的 3306, mssql的1433,有时候打不开网页, 原因是没有在ecs安全组去设置这个端口号. 解决: 点击ecs下网络和安全下的安全组 在弹出的安全组中,如果没有就新建安全组,然后点击配置规则 最后如上图点击添加...或快速创建.   have fun!  将编程看作是一门艺术,而不单单是个技术。
21044 0
四、伪分布下安装hive1.2
声明:本篇blog并没有配置MySQL,元数据库为derby 如需配置mysql请点击:http://blog.csdn.net/gamer_gyt/article/details/47776369 一、环境 Ubuntu14.
1000 0
+关注
仔仔930628
致力于hadoop全栈
16
文章
0
问答
文章排行榜
最热
最新
相关电子书
更多
JS零基础入门教程(上册)
立即下载
性能优化方法论
立即下载
手把手学习日志服务SLS,云启实验室实战指南
立即下载