开发者社区> 问答> 正文

为什么HDFS只适用于大型数据集而不适用于许多小文件?

南霸天霸南北 2019-11-07 20:07:59 680

为什么HDFS只适用于大型数据集而不适用于许多小文件?

分享到
取消 提交回答
全部回答(1)
  • 南霸天霸南北
    2019-11-07 20:08:12

    这是由于NameNode的性能问题。通常,NameNode被分配了巨大的空间来存储大规模文件的元数据。元数据应该来自单个文件,以实现最佳的空间利用率和成本效益。对于小尺寸文件,NameNode不使用整个空间,这是性能优化问题。

    0 0
阿里巴巴大数据计算
使用钉钉扫一扫加入圈子
+ 订阅

阿里大数据官方技术圈

推荐文章
相似问题
推荐课程
链接