CDH大数据节点宕机测试

本文涉及的产品
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: CDH大数据节点宕机测试

一、集群现状

集群组件说明:目前集群中安装了若干大数据相关组件,包括HDFS、Hbase、Hive等存储相关组件与Flume、Spark、Kafka等数据采集与处理相关组件。
在这里插入图片描述
集群主机说明:目前集群中有5台主机,为同一台宿主机上的5台虚拟机。为确保HDFS副本正常分布,故主机cdh1、cdh2、cdh3的机架设置为“test1”,cdh4、cdh5的机架设置为“test2”
在这里插入图片描述

注:Hadoop在设计时考虑到数据的安全与高效,数据文件默认在HDFS上存放三份,存储策略为:
第一个副本放在其中一台节点中
第二个副本放置在与第一个副本所在节点相同机架内的其它节点上
第三个副本放置在不同机架的节点上

二、测试内容与目标

在集群中某一台节点完全宕机的情况下,通过新增主机的方式,能够恢复到集群原状态。其中包括但不限于以下几点:
1、 集群中所有数据正常不变,不丢失。
2、 集群中组件保证正常运行。
3、 新增主机正常运行,不出现异常。
我们选择cdh3作为宕机主机,目前cdh3所运行的服务如下所示,在cdh3宕机后,我们需要将新增主机安装同样的服务以恢复集群。
在这里插入图片描述

注:集群中所有节点在测试前都最好打上快照,不要问我为什么知道

三、节点删除
1、 首先我们让cdh3节点“宕机”,即将节点cdh3关机,集群呈现以下状态
在这里插入图片描述
在“主机”中将cdh3宕机节点删除,取消选中“跳过管理角色”,我们需要完成将此主机所有组件完全清除。
在这里插入图片描述
删除成功后即显示以下内容
在这里插入图片描述
然后我们将其从CM管理平台中删除,即为彻底将其节点清除
在这里插入图片描述
在上述操作都完成后,目前集群中只剩下4个节点,且集群现状如下
在这里插入图片描述

注:集群中Oozie出现异常的原因为Oozie Server节点安装在cdh3上,对本次测试影响不大,后续我们重新添加上即可

四、数据验证
检测一下hdfs中的数据健康情况,可以看到数据一切正常,并没有因为cdh3的宕机而造成数据丢失和出现坏块。
在删除cdh3主机时,集群自动做了数据平衡,将cdh3中的副本数据全都恢复至其他节点中去了。 在这里插入图片描述

相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
12天前
|
存储 关系型数据库 测试技术
玩转n8n测试自动化:核心节点详解与测试实战指南
n8n中节点是自动化测试的核心,涵盖触发器、数据操作、逻辑控制和工具节点。通过组合节点,测试工程师可构建高效、智能的测试流程,提升测试自动化能力。
|
8月前
|
分布式计算 Shell MaxCompute
odps测试表及大量数据构建测试
odps测试表及大量数据构建测试
|
10月前
|
分布式计算 Java MaxCompute
ODPS MR节点跑graph连通分量计算代码报错java heap space如何解决
任务启动命令:jar -resources odps-graph-connect-family-2.0-SNAPSHOT.jar -classpath ./odps-graph-connect-family-2.0-SNAPSHOT.jar ConnectFamily 若是设置参数该如何设置
|
11月前
|
SQL 分布式计算 NoSQL
大数据-170 Elasticsearch 云服务器三节点集群搭建 测试运行
大数据-170 Elasticsearch 云服务器三节点集群搭建 测试运行
228 4
|
11月前
|
分布式计算 Hadoop 大数据
大数据体系知识学习(一):PySpark和Hadoop环境的搭建与测试
这篇文章是关于大数据体系知识学习的,主要介绍了Apache Spark的基本概念、特点、组件,以及如何安装配置Java、PySpark和Hadoop环境。文章还提供了详细的安装步骤和测试代码,帮助读者搭建和测试大数据环境。
332 1
|
11月前
|
运维 监控 数据可视化
大数据-171 Elasticsearch ES-Head 与 Kibana 配置 使用 测试
大数据-171 Elasticsearch ES-Head 与 Kibana 配置 使用 测试
392 1
|
11月前
|
SQL 消息中间件 大数据
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(一)
266 1
|
11月前
|
SQL 大数据 Apache
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
大数据-159 Apache Kylin 构建Cube 准备和测试数据(二)
167 1
|
1月前
|
机器学习/深度学习 运维 监控
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
运维不怕事多,就怕没数据——用大数据喂饱你的运维策略
71 0
|
2月前
|
数据采集 分布式计算 DataWorks
ODPS在某公共数据项目上的实践
本项目基于公共数据定义及ODPS与DataWorks技术,构建一体化智能化数据平台,涵盖数据目录、归集、治理、共享与开放六大目标。通过十大子系统实现全流程管理,强化数据安全与流通,提升业务效率与决策能力,助力数字化改革。
88 4