开发者社区> 问答> 正文

HDFS的设计目标是什么?

HDFS的设计目标是什么?

展开
收起
真的很搞笑 2021-12-05 16:48:54 373 0
1 条回答
写回答
取消 提交回答
  • Hadoop的目标是在非常大的集群中使用常用服务器,并且每个服务器都有一组廉价内部磁盘驱动器。为了获得更好的性能,MapReduce API尝试在存储要处理的数据的服务器上分配工作负载,这称为数据局部性。

    因此,在Hadoop环境中,建议不要使用区域存储网络(SAN)或网络直接存储(NAS) 。对于使用SAN或NAS的Hadoop部署,额外的网络通信开销可能会导致性能瓶颈,尤其是在集群规模较大的情况下。

    2021-12-05 16:49:10
    赞同 展开评论 打赏
问答标签:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
海量数据分布式存储——Apache HDFS之最新进展 立即下载
Hadoop存储与计算分离实践 立即下载
实战-如何基于HBase构建图片视频数据的统一存储检索方案 立即下载