大数据开发岗面试复习30天冲刺 - 日积月累,每日五题【Day11】——Hbase5

简介: 大数据开发岗面试复习30天冲刺 - 日积月累,每日五题【Day11】——Hbase5

停🤚

不要往下滑了,

默默想5min,

看看这5道面试题你都会吗?

面试题 01、什么是全局索引?
面试题02、什么是覆盖索引?
面试题 03、什么是本地索引?
面试题04、请简述Hbase写入数据的流程
面试题05、请简述Hbase读取数据的流程

以下答案仅供参考:

面试题 01、什么是全局索引?

•创建全局索引,会自动构建一张索引表

•索引表结构

–Rowkey:索引字段+原表的rowkey

–列:占位置x

•特点:如果查询字段或者查询条件不是索引字段,就不会走索引

•应用:适合于读多写少

面试题02、什么是覆盖索引?

•创建覆盖索引,会自动构建一张索引表

•索引表结构

–Rowkey:索引字段+原表的rowkey

–列:将include中的列放入索引表

•特点

–如果查询字段或者查询条件不是索引字段,就不会走索引

–如果查询的字段在索引表中,直接从索引表返回结果

面试题 03、什么是本地索引?

•创建覆盖索引,会自动基于原表构建一个列族来实现索引存储

•原表的数据中:多了一个索引列族

•特点

–不论查询字段是否是索引字段,都会走索引

–将索引与数据存储在同一台RegionServer,提高索引读写性能

•注意

–本地索引会修改原数据表,对于本地索引只能使用Phoenix来操作表的数据

–盐表不能使用本地索引

面试题04、请简述Hbase写入数据的流程

•step1:获取元数据

–客户端请求Zookeeper,获取meta表所在的regionserver的地址

–读取meta表的数据:获取所有表的元数据

•step2:找到对应的Region

–根据meta表中的元数据,找到表对应的所有的region

–根据region的范围和写入的Rowkey,判断需要写入具体哪一个Region

–根据region的Regionserver的地址,请求对应的RegionServer

•step3:写入数据

–请求RegionServer写入对应Region:根据Region的名称来指定写入哪个Region

–根据列族判断写入哪一个具体的Store

•先写入WAL:Hlog预写日志中

–写入对应Store的MemStore中

•MemStore

面试题05、请简述Hbase读取数据的流程

•step1:获取元数据

–客户端请求Zookeeper,获取meta表所在的regionserver的地址

–读取meta表的数据

–注意:客户端会缓存meta表的数据,只有第一次会连接ZK,读取meta表的数据,缓存会定期失效,要重新缓存

•避免每次请求都要先连接zk,再读取meta表

•step2:找到对应的Region

–根据meta表中的元数据,找到表对应的region

–根据region的范围和写入的Rowkey,判断需要写入具体哪一个Region

–根据region的Regionserver的地址,请求对应的RegionServer

•step3:读取数据

–先查询memstore

–如果查询的列族开启了缓存机制,就读取BlockCache

–如果没有,就读取StoreFile,并将结果放入BlockCache中

总结

今天我们复习了面试中常考的Hbase相关的五个问题,你做到心中有数了么?

其实做这个专栏我也有私心,就是希望借助每天写一篇面试题,督促自己学习,以免在吹水群甚至都没有谈资!

对了,如果你的朋友也在准备面试,请将这个系列扔给他,

好了,今天就到这里,学废了的同学,记得在评论区留言:打卡。给同学们以激励。


相关实践学习
基于MaxCompute的热门话题分析
Apsara Clouder大数据专项技能认证配套课程:基于MaxCompute的热门话题分析
目录
相关文章
|
JavaScript 前端开发 应用服务中间件
【Vue面试题三十】、vue项目本地开发完成后部署到服务器后报404是什么原因呢?
这篇文章分析了Vue项目在服务器部署后出现404错误的原因,主要是由于history路由模式下服务器缺少对单页应用的支持,并提供了通过修改nginx配置使用`try_files`指令重定向所有请求到`index.html`的解决方案。
【Vue面试题三十】、vue项目本地开发完成后部署到服务器后报404是什么原因呢?
|
存储 安全 Java
每日大厂面试题大汇总 —— 今日的是“美团-后端开发-一面”
文章汇总了美团后端开发一面的面试题目,内容涉及哈希表、HashMap、二叉树遍历、数据库索引、死锁、事务隔离级别、Java对象相等性、多态、线程池拒绝策略、CAS、设计模式、Spring事务传播机制及RPC序列化工具等。
437 0
|
Java 大数据 分布式数据库
Spring Boot 与 HBase 的完美融合:探索高效大数据应用开发的新途径
【8月更文挑战第29天】Spring Boot是一款广受好评的微服务框架,以其便捷的开发体验著称。HBase则是一个高性能的大数据分布式数据库系统。结合两者,可极大简化HBase应用开发。本文将对比传统方式与Spring Boot集成HBase的区别,展示如何在Spring Boot中优雅实现HBase功能,并提供示例代码。从依赖管理、连接配置、表操作到数据访问,Spring Boot均能显著减少工作量,提升代码可读性和可维护性,使开发者更专注业务逻辑。
1040 1
|
存储 消息中间件 NoSQL
每日大厂面试题大汇总 —— 今日的是“京东-后端开发-一面”
文章汇总了京东后端开发一面的面试题目,包括ArrayList与LinkedList的区别、HashMap的数据结构和操作、线程安全问题、线程池参数、MySQL存储引擎、Redis性能和线程模型、分布式锁处理、HTTP与HTTPS、Kafka等方面的问题。
682 0
|
人工智能 DataWorks 大数据
大数据AI一体化开发再加速:DataWorks 支持GPU类型资源
大数据开发治理平台 DataWorks 的Serverless资源组支持GPU资源类型,以免运维、按需付费、弹性伸缩的Serverless架构,将大数据处理与AI开发能力无缝融合。面向大数据&AI协同开发场景,DataWorks提供了交互式开发和分析工具Notebook。开发者在创建个人开发环境时,可以选择GPU类型的资源作为Notebook运行环境,以支持进行高性能的计算工作。本教程将基于开源多模态大模型Qwen2-VL-2B-Instruct,介绍如何使用 DataWorks Notebook及LLaMA Factory训练框架完成文旅领域大模型的构建。
1006 24
|
数据采集 机器学习/深度学习 DataWorks
DataWorks产品评测:大数据开发治理的深度体验
DataWorks产品评测:大数据开发治理的深度体验
648 1
|
存储 分布式计算 分布式数据库
深入理解Apache HBase:构建大数据时代的基石
在大数据时代,数据的存储和管理成为了企业面临的一大挑战。随着数据量的急剧增长和数据结构的多样化,传统的关系型数据库(如RDBMS)逐渐显现出局限性。
1956 12
|
NoSQL 前端开发 关系型数据库
第四次面试总结 — 嘉和智能 - 全栈开发
本文是作者对嘉和智能全栈开发岗位的第四次面试总结,主要围绕对各种技术栈的了解程度进行提问,包括数据库的使用经验、对Redis和nginx的理解以及前端技能水平。
239 1
|
SQL 安全 关系型数据库
第三次面试总结 - 吉云集团 - 全栈开发
本文是作者对吉云集团全栈开发岗位的第三次面试总结,面试结果非常好,内容全面覆盖了Java基础、MySQL和项目经验,作者认为自己的MySQL基础知识稍弱,需要加强。
242 0
第三次面试总结 - 吉云集团 - 全栈开发
|
消息中间件 存储 前端开发
资深Android开发的5个经典面试题
本文首发于公众号“AntDream”,欢迎关注。文章详细解答了五个常见的Android面试题,涵盖内存泄漏与溢出、Binder机制、MVC/MVP/MVVM架构、Handler机制及Context对象等内容,帮助读者深入了解Android开发的核心概念。
423 0