Hadoop: 启动后发现没有DataNode

简介: Hadoop: 启动后发现没有DataNode

错误原因

DataNode的ClusterID与NameNode的ClusterID不完全一致。

解决办法

先找到hadoop所在的路径。

例如,cd /usr/local/src/hadoop/hadoop-2.7.7

找到同时有data文件夹和name文件夹的目录。

例如,cd hdfs

打开name文件夹里的version配置项,vi name/current/VERSION

将ClusterID复制出去。

打开data文件夹里的VERSION配置项,vi data/current/VERSION

把该文件中的clusterID替换成name/current/VERSION里复制出来的clusterID。

重新初始化HDFShdfs namenode -format

重启hdfs与yarn

cd /usr/local/src/hadoop/hadoop-2.7.7/sbin
./start-dfs.sh
./start-yarn.sh


目录
相关文章
|
8月前
|
机器学习/深度学习 缓存 分布式计算
Hadoop基础学习---4、HDFS写、读数据流程、NameNode和SecondaryNameNode、DataNode
Hadoop基础学习---4、HDFS写、读数据流程、NameNode和SecondaryNameNode、DataNode
|
分布式计算 Hadoop
hadoop datanode进程不能启动
hadoop datanode进程不能启动
271 0
hadoop datanode进程不能启动
|
分布式计算 Hadoop Java
Apache Hadoop 答疑:解决 Apache Hadoop 启动时 DataNode 启动异常的问题
Apache Hadoop 答疑:解决 Apache Hadoop 启动时 DataNode 启动异常的问题
137 0
Apache Hadoop 答疑:解决 Apache Hadoop 启动时 DataNode 启动异常的问题
|
存储 机器学习/深度学习 分布式计算
Hadoop中的DataNode、工作机制、数据完整性、掉线时限参数设置
Hadoop中的DataNode、工作机制、数据完整性、掉线时限参数设置
Hadoop中的DataNode、工作机制、数据完整性、掉线时限参数设置
|
存储 分布式计算 Hadoop
Hadoop的namenode的管理机制,工作机制和datanode的工作原理
HDFS前言:   1) 设计思想     分而治之:将大文件、大批量文件,分布式存放在大量服务器上,以便于采取分而治之的方式对海量数据进行运算分析;   2)在大数据系统中作用:     为各类分布式运算框架(如:mapreduce,spark,tez,……)提供数据存储服务   3...
1897 0
|
存储 分布式计算 Hadoop
Hadoop集群改名导致无法启动DataNode
Hadoop集群更名 导致无法启动D a ta N o de 错误描述
284 0
Hadoop集群改名导致无法启动DataNode
|
分布式计算 Hadoop
hadoop集群运行jps命令以后Datanode节点未启动的解决办法
出现该问题的原因:在第一次格式化dfs后,启动并使用了hadoop,后来又重新执行了格式化命令(hdfs namenode -format),这时namenode的clusterID会重新生成,而datanode的clusterID 保持不变。
1458 0

相关实验场景

更多