开发者社区> 问答> 正文

HBase中的文件类型HFile的存储格式是什么?

HBase中的文件类型HFile的存储格式是什么?

展开
收起
游客k7rjnht6hbtk6 2021-12-06 16:23:53 409 0
1 条回答
写回答
取消 提交回答
  • HFile文件是不定长的,长度固定的只有其中的两块:Trailer和FileInfo。

    Trailer中有指针指向其他数据块的起始点,FileInfo记录了文件的一些meta信息。 Data Block是hbase io的基本单元,为了提高效率,HRegionServer中有基于LRU的block cache机制。 每个Data块的大小可以在创建一个Table的时候通过参数指定(默认块大小64KB),大号的Block有利于顺序Scan,小号的 Block利于随机查询。 每个Data块除了开头的Magic以外就是一个个KeyValue对拼接而成,Magic内容就是一些随机数字,目的是防止数据损坏

    2021-12-06 16:24:27
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据时代的存储 ——HBase的实践与探索 立即下载
Hbase在滴滴出行的应用场景和最佳实践 立即下载
阿里云HBase主备双活 立即下载