开发者社区> 问答> 正文

HDFS主节点是什么?

HDFS主节点是什么?

展开
收起
芯在这 2021-12-05 19:16:48 1260 0
1 条回答
写回答
取消 提交回答
  • 主节点负责管理分布式文件系统的命名空间,保存两个核心的数据结构,即FsImage和EditLog。FsImage用于维护文件系统树以及文件树中所有的文件和文件夹的元数据,操作日志文件EditLog中记录了所有针对文件的创建、删除、重命名等操作。主节点记录了每个文件中各个块坐在的从节点的位置信息,但是并不持久化存储这些信息,而是在系统每次启动时扫描所有数据节点重构得到这些信息。

    主节点在启动时,会将FsImage的内容加载到内存中,然后执行EditLog文件中的各种操作,使得内存中的元数据保持最新。这个操作完成以后,就会创建一个新的FsImage文件和一个空的EditLog文件。主节点启动成功并进入正常运行以后,HDFS的更新操作都会被写入到EditLog,这是因为对于分布式文件系统而言,Fsimage文件通常都很庞大,如果所有的更新操作都直接往Fsimage文件中添加的话,那么系统会变得非常缓慢。

    2021-12-05 22:25:46
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
HBase 高可用HA 立即下载
低代码开发师(初级)实战教程 立即下载