如何升级CDH7.1.1到CDH7.1.3

简介: 如何升级CDH7.1.1到CDH7.1.3

CDH7.1.3 中 Ozone终于可以正式用于生产环境了。为了直观体验Ozone,我们需要把现有CDH7.1.1集群升级到CDH7.1.3。如何升级CDH集群,这便是本文要讲的主要内容。

CDH的升级共有三种版本的升级:major,minor和maintenance。Major版本升级通常是Hadoop版本重大变化,涉及到大量更新内容;Minor版本升级是基于相同Major版本进行升级,比如目前我们要做的,将7.1.1升级到7.1.3,这类升级通常涉及到新的功能发布和Bug修复等;Maintenance版本升级主要是重大Bug修复或解决了某些安全问题。

Cloudera Manager的yum源配置

本次升级,我们使用parcel进行升级。首先准备要升级的rpm包

配置cloudera-manager.repo文件

备份Cloudera Manager数据库

停止Cloudera Management Service服务

备份Cloudera Manager数据库

备份了如下几个数据库:

  • Cloudera Manager Server
  • Cloudera Navigator Audit Server
  • Cloudera Navigator Metadata Server
  • Activity Monitor
  • Reports Manager

升级步骤

停止Cloudera Manager Server和Agent

在Cloudera Manager上备份以下目录

运行以下命令升级Cloudera Manager Server

验证是否升级成功

启动Cloudera Manager Server服务

登录Cloudera Manager管理界面,显示升级向导

CDH升级

准备CDH7.1.3的parcel包

备份NameNode上的HDFS Metastore和数据库

向集群中添加新版的存储库

升级Cluster1上运行的版本

集群升级成功

添加Ozone服务,Ozone Recon页面

到此CDH和CM升级完成。后续我们会持续研究Ozone项目,一步步分析Ozone是如何解决HDFS小文件问题的。

相关文章
|
6月前
|
SQL 人工智能 分布式计算
一文看懂 Cloudera 对 CDH/HDP/CDP 的产品支持策略
一文看懂 Cloudera 对 CDH/HDP/CDP 的产品支持策略
一文看懂 Cloudera 对 CDH/HDP/CDP 的产品支持策略
|
9月前
|
存储 安全 关系型数据库
安装CDH7.1.1
安装CDH7.1.1
209 0
|
9月前
|
监控 大数据 物联网
在CDH7.1.1中安装NiFi
在CDH7.1.1中安装NiFi
|
分布式计算 资源调度 Hadoop
CDH 搭建_ Hadoop _安装包|学习笔记
快速学习 CDH 搭建_ Hadoop _安装包
198 0
CDH 搭建_ Hadoop _安装包|学习笔记
|
分布式计算 Hadoop
EMR 升级Hadoop 2.8.5
信息摘要: EMR 提供Hadoop 2.8.5,方便开发者使用新版Hadoop功能。适用客户: 所有客户版本/规格功能: EMR-3.18.0及以后版本,Hadoop升级为2.8.5,开发者可以方便地使用新版Hadoop的功能。
|
存储 druid 分布式数据库
大数据平台CDH与HDP对比
CDH & HDP平台对比
13768 1
|
SQL 分布式数据库 Hbase
CDH集成phoenix
Phoneix是基于Hbase之上的SQL工具,可以使用标准的SQL语法来操作Hbase。网上看了很多集成Phoenix的大多是下载安装包解压配置参数啥的,如果没有和自己环境相匹配的那么就要去编译了。
1890 0
|
关系型数据库 大数据 MySQL
离线部署 CDH 5.12.1 及使用 CDH 部署 Hadoop 大数据平台集群服务
CDH是Cloudera Distribution Hadoop的简称,顾名思义,就是cloudera公司发布的Hadoop版本,封装了Apache Hadoop,提供Hadoop所有的服务,包括HDFS,YARN,MapReduce以及各种相关的components:HBase, Hive, ZooKeeper,Kafka等。
5815 0
|
SQL 分布式计算 Java

相关实验场景

更多