Hive的安装与部署之本地Mysql模式

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介: Hive的安装与部署之本地Mysql模式

0x00 教程内容


  1. 环境准备
  2. 配置本地Mysql模式


0x01 环境准备


1. 安装Hadoop

安装Hadoop,请查看教程:Hadoop核心组件之HDFS的安装与配置


2. 安装Hive

安装Hive,请查看教程:D007 复制粘贴玩大数据之安装与配置Hive


3. 安装Mysql

安装Mysql,请查看教程:Mysql的安装与配置(Centos7)


0x02 配置本地Mysql模式


1. 编辑配置文件

a. 使用hadoop-sny用户

cd /home/hadoop-sny/bigdata/apache-hive-2.3.3-bin/conf

vi hive-site.xml

添加下面内容(原本是空白的文件):


<configuration>
<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
</property>
<property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
</property>
<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive/warehouse</value>
</property>
</configuration>


注意:

此处我的Mysql用户名是root,密码也是root,不同请自行修改。

2. 上传Mysql驱动包

a. 将mysql的jdbc驱动包mysql-connector-java-5.*-bin.jar上传到$HIVE_HOME/lib


image.png


0x03 启动并校验


1. 重新初始化Hive

a. 执行初始化操作

$HIVE_HOME/bin/schematool -dbType mysql -initSchema

发现报错:


image.png


b. 解决:

启动一个终端二,启动Mysql:

su - root

mysql -uroot -p


执行两行,使得master可以访问hive数据库:

grant all PRIVILEGES on hive.* to 'root'@'master' identified by 'root';

flush privileges;


c. 回到终端一,重新执行初始化操作

$HIVE_HOME/bin/schematool -dbType mysql -initSchema


image.png


2. 启动Hive

a. 启动Hive

hive


image.png


b. 切换登录了Mysql的终端二,查看数据库,发现已经建立了hive数据库,说明已经配置成功了

show databases;


image.png


0xFF 总结


  1. 本次将Hive的元数据交给了Mysql来管理,其实Hive的安装与部署还可以远端方式,请留意后期教程!
相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
2天前
|
SQL 存储 关系型数据库
MySQL Cluster集群安装及使用
MySQL Cluster集群安装及使用
|
6天前
|
关系型数据库 MySQL 数据库
《MySQL 简易速速上手小册》第1章:MySQL 基础和安装(2024 最新版)
《MySQL 简易速速上手小册》第1章:MySQL 基础和安装(2024 最新版)
28 4
|
2天前
|
关系型数据库 MySQL Windows
windows安装MySQL5.7教程
windows安装MySQL5.7教程
9 0
|
9天前
|
关系型数据库 MySQL Linux
Linux联网安装MySQL Server
Linux联网安装MySQL Server
22 0
|
10天前
|
关系型数据库 MySQL Linux
centos7安装mysql-带网盘安装包
centos7安装mysql-带网盘安装包
59 2
|
13天前
|
关系型数据库 MySQL 数据库
Docker安装MySQL
Docker安装MySQL
29 1
|
14天前
|
关系型数据库 MySQL 数据安全/隐私保护
MySQL 安装及连接
MySQL 安装及连接
33 0
|
17天前
|
关系型数据库 MySQL 数据库
mysql卸载、下载、安装(window版本)
mysql卸载、下载、安装(window版本)
|
1月前
|
关系型数据库 MySQL 数据库连接
关于MySQL-ODBC的zip包安装方法
关于MySQL-ODBC的zip包安装方法
|
1月前
|
关系型数据库 MySQL 数据库
rds安装数据库客户端工具
安装阿里云RDS的数据库客户端涉及在本地安装对应类型(如MySQL、PostgreSQL)的客户端工具。对于MySQL,可选择MySQL Command-Line Client或图形化工具如Navicat,安装后输入RDS实例的连接参数进行连接。对于PostgreSQL,可以使用`psql`命令行工具或图形化客户端如PgAdmin。首先从阿里云控制台获取连接信息,然后按照官方文档安装客户端,最后配置客户端连接以确保遵循安全指引。
86 1