退役旧数据节点 | 学习笔记

简介: 快速学习退役旧数据节点

开发者学堂课程【Hadoop 分布式文件系统 HDFS:退役旧数据节点】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/93/detail/1468


退役旧数据节点


1、添加白名单

添加到白名单的主机节点,都允许访问Name Node,不在白名单的主机节点都会被退出。

配置白名单的步骤:

(1)在 Name Node 的 /opt/module/hadoop-2.7.2/etc/hadoop 目录下创建 dfs.hosts 文件

图片1.png

添加如下主机名称(不添加 hadoop105)

图片2.png

(2)在 Name Node 的 hdfs-site.xml 配置文件中增加 dfs.hosts 属性

图片3.png

(3)配置文件分发

图片4.png

(4)刷新 Name Node

图片5.png

(5)更新 Resource Manager 节点

图片6.png

(6)在 Web 浏览器上查看

示例:图片7.png

在这里面添加的主机都是允许访问集群的,同样的需要注意不允许有空行和空格,因为同样都是被脚本调用。

启用成功之后来到 hdfs.hosts

图片8.png

把配置路径粘贴过来启动成功,不要忘记分发,分发到104上面

图片9.png

下面刷新 Name Node

图片10.png

刷新成功之后再去查看集群

图片11.png

白名单一般是在刚搭建集群的时候允许哪台主机来访问集群。

2、如果数据不均衡,可以用命令式先集群的再平衡

图片12.png

退役一个节点之后需要把节点数据拷贝到别的节点上,这个时候就有可能导致某些节点负载过大。

相关文章
|
1月前
|
Kubernetes 容器
k8s集群部署成功后某个节点突然出现notready状态的问题原因分析和解决办法
k8s集群部署成功后某个节点突然出现notready状态的问题原因分析和解决办法
15 0
|
4月前
节点退役失败案例
节点退役失败案例
17 0
|
6月前
|
NoSQL Redis
114分布式电商项目 - Redis集群(节点增加删除)
114分布式电商项目 - Redis集群(节点增加删除)
25 1
|
7月前
|
存储 分布式计算 负载均衡
HDFS服役新数据节点和退役旧节点步骤
HDFS服役新数据节点和退役旧节点步骤
181 1
|
9月前
|
算法
新旧节点对比与更新:differNodes
新旧节点对比与更新:differNodes
62 1
|
11月前
|
SQL 安全 Shell
[永久开源] vulntarget-b_打靶记录(上)
[永久开源] vulntarget-b_打靶记录
173 0
|
11月前
|
安全 Shell 网络安全
[永久开源] vulntarget-b_打靶记录(下)
[永久开源] vulntarget-b_打靶记录
143 0
|
11月前
|
SQL Web App开发 安全
【永久开源】vulntarget-c 打靶记录(下)
【永久开源】vulntarget-c 打靶记录
131 0
|
11月前
|
安全 Ubuntu 网络协议
【永久开源】vulntarget-c 打靶记录(上)
【永久开源】vulntarget-c 打靶记录
128 0
|
Kubernetes 网络安全 调度
关于K8s中工作节点扩容、隔离、恢复的一些笔记
写在前面 分享一些K8s中Node扩容、隔离、恢复的笔记 博文主要是通过 kubeadm做节点扩容的一个Demo 理解不足小伙伴帮忙指正
281 0