退役旧数据节点 | 学习笔记

简介: 快速学习退役旧数据节点

开发者学堂课程【Hadoop 分布式文件系统 HDFS:退役旧数据节点】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1468


退役旧数据节点


1、添加白名单

添加到白名单的主机节点,都允许访问Name Node,不在白名单的主机节点都会被退出。

配置白名单的步骤:

(1)在 Name Node 的 /opt/module/hadoop-2.7.2/etc/hadoop 目录下创建 dfs.hosts 文件

图片1.png

添加如下主机名称(不添加 hadoop105)

图片2.png

(2)在 Name Node 的 hdfs-site.xml 配置文件中增加 dfs.hosts 属性

图片3.png

(3)配置文件分发

图片4.png

(4)刷新 Name Node

图片5.png

(5)更新 Resource Manager 节点

图片6.png

(6)在 Web 浏览器上查看

示例:图片7.png

在这里面添加的主机都是允许访问集群的,同样的需要注意不允许有空行和空格,因为同样都是被脚本调用。

启用成功之后来到 hdfs.hosts

图片8.png

把配置路径粘贴过来启动成功,不要忘记分发,分发到104上面

图片9.png

下面刷新 Name Node

图片10.png

刷新成功之后再去查看集群

图片11.png

白名单一般是在刚搭建集群的时候允许哪台主机来访问集群。

2、如果数据不均衡,可以用命令式先集群的再平衡

图片12.png

退役一个节点之后需要把节点数据拷贝到别的节点上,这个时候就有可能导致某些节点负载过大。

相关文章
|
3月前
|
存储 缓存 索引
字典是怎么扩容的?它会经历哪些过程?
字典是怎么扩容的?它会经历哪些过程?
65 3
|
5月前
|
存储 分布式计算 负载均衡
|
8月前
|
存储 Java API
HDFS如何处理故障和节点失效?请解释故障恢复机制。
HDFS如何处理故障和节点失效?请解释故障恢复机制。
285 0
|
8月前
节点退役失败案例
节点退役失败案例
49 0
多个 服务器 节点同步 时间 chronyc
多个 服务器 节点同步 时间 chronyc
149 0
|
存储 分布式计算 负载均衡
HDFS服役新数据节点和退役旧节点步骤
HDFS服役新数据节点和退役旧节点步骤
296 1
|
算法
新旧节点对比与更新:differNodes
新旧节点对比与更新:differNodes
87 1
|
存储 Kubernetes 测试技术
应用存储和持久化数据卷:存储快照与拓扑调查(一)|学习笔记
快速学习应用存储和持久化数据卷:存储快照与拓扑调查(一)
155 0
应用存储和持久化数据卷:存储快照与拓扑调查(一)|学习笔记
|
存储 Kubernetes 调度
应用存储和持久化数据卷:存储快照与拓扑调查(二)|学习笔记
快速学习应用存储和持久化数据卷:存储快照与拓扑调查(二)
108 0
应用存储和持久化数据卷:存储快照与拓扑调查(二)|学习笔记
|
SQL 分布式计算 Hadoop
Hadoop主节点宕机第二节点补救
Hadoop主节点宕机第二节点补救
403 0
Hadoop主节点宕机第二节点补救

热门文章

最新文章