HDFS 中 edits 日志文件和 fsimage 如何同步？
HDFS 中 edits 日志文件和 fsimage 如何同步？
展开
收起
1
条回答
写回答
写回答
-
- 合并edits 和 fsimage 有两个条件
-
SN收到合并请求后会通知NN停止往edits文件中写数据，不然会导致数据不一致的问题 SN拿到的edits不是最新的数据
-
然后NN会创建一个新的edits文件 命名为edits.new ，并把后来的日志数据写入edits.new 文件中
-
然后SN把老的edits文件和 fsimage文件下载到SN 节点主机
-
下载以后会对两个文件进行checkpoint操作，合并成一个文件fsimage.checkpoint
-
然后把合并好的fsimage.checkpoint文件上传到NN节点主机上，并重命名为fsimage，并把edits.new 文件重命名为 edits。
-
2021-12-05 23:16:00赞同 展开评论 打赏
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
问答排行榜
最热
最新
推荐问答
相关文章
相关电子书
更多
