开发者社区> 问答> 正文

E-MapReduce的HDFS进入安全模式导致HDFS服务不可用如何处理

已解决

E-MapReduce的HDFS进入安全模式导致HDFS服务不可用如何处理

展开
收起
阿里云服务支持 2022-12-13 15:59:35 340 0
1 条回答
写回答
取消 提交回答
  • 官方回答

    可能有以下原因造成:

    1. 数据节点硬盘故障,或节点故障可能导致数据副本丢失。

    2. HDFS在如下情况进入安全模式:HDFS block丢失的阈值过高。在前面情况发生后,HDFS进入SafeMode。HDFS需要一个很长的时间和特定条件来退出SafeMode。

      ○ 当NameNode启动且等待DataNode上报副本。

      ○ b. NameNode所在磁盘空间不足。

    3. HDFS对应文件的副本全部丢失。

    具体排查思路:

    1. 检查FusionInsight Manager界面是否有节点、硬盘故障告警。

    2. 检查NameNode的块丢失阈值“dfs.namenode.safemode.threshold-pct”是否配置过高,默认值为“0.999999”。

    3. 检查安全模式退出命令是否使用正确。

    2022-12-13 16:13:15
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
作为全球云计算的领先者,阿里云为全球230万企业提供着云计算服务,服务范围覆盖200多个国家和地区。我们致力于为企业、政府等组织机构提供安全可靠的云计算服务,给用户带来极速愉悦的服务体验。
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
低代码开发师(初级)实战教程 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载