开发者社区> 问答> 正文

HDFS中机架感知是什么?

HDFS中机架感知是什么?

展开
收起
真的很搞笑 2021-12-05 16:12:34 264 0
1 条回答
写回答
取消 提交回答
  • 分布式集群通常包含非常多的机器,收到机架槽位和交换机网口的限制,通常大型分布式集群会跨好几个机架 机架内机器之间的网络速度通常会高于跨机架机器之间的网络速度 机架之间机器的网络通信通常受到上层交换机间网络带宽的限制 文件块的放置 假设一个Block有3份备份 一份放在NameNode指定的DataNode上,一份放在与指定DataNode不在同一台机器上的DataNode上,最后一份放在与指定DataNode同一机架的DataNode上 备份的目的是为了数据安全,采用这种配置方式主要是考虑同一机架内机器宕机的情况,以及不同机架之间进行数据复制会带来的性能降低问题

    2021-12-05 16:12:56
    赞同 展开评论 打赏
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
HDFS optimization for Hbase At XiaoMi 立即下载
HDFS optimization for HBase at XiaoMi 立即下载