大家好,我是小耶,写功课只是为了我踩过的坑,你们别再踩了!
做DBA最怕遇到什么情况?不是CPU被打满,也不是磁盘IO告警,而是监控大盘上一片绿(CPU不到40%,磁盘IO正常),但业务方在群里疯狂艾特你:“系统卡死了,TPS死活上不去!”
我遇到过最离谱的一次,一张3000万行的订单表,平时高峰期写入TPS能跑5000。某天突然断崖式跌到2000,各种超时。查了慢查询、看了行锁、翻了死锁日志,全都没有问题。最后在 SHOW ENGINE INNODB STATUS 的 SEMAPHORES 段里,看到一个平时根本不会注意的锁在排大队:btr_search_latch。
顺藤摸瓜,揪出了背后的元凶——一个为了“加速”而默认开启的机制:自适应哈希索引(AHI)。而且,MySQL 8.4 已经直接把它默认关闭了。
要想搞明白它为什么会反噬写入,得先从它的底层机制拆起。
一、机制拆解:AHI到底是什么,它是怎么工作的
InnoDB的核心数据结构是B+树索引。执行一条等值查询(如 WHERE id = 12345),B+树需要从根节点一路往下找,经过几层叶子节点才能定位数据,复杂度是 O(log n)。对于千万级的大表,这意味着至少需要3-4次页读取(在内存中即Latch获取)。
AHI(Adaptive Hash Index)的优化逻辑是:如果InnoDB发现某个索引页被频繁地以相同模式进行等值访问,它会在内存中为这个页的键值自动建立一个哈希表。之后的等值查询只要在哈希表里做一次哈希计算,就能以 O(1) 的时间复杂度直接定位到目标页,完全跳过B+树的遍历过程。
关键机制点:
自适应:AHI不需要手动建,是InnoDB内部监控到热点页后自动创建的。
页级粒度:AHI是基于“索引页(Page)”建立的,不是基于整个表或索引。
只认等值:哈希结构天然不支持范围查询。只有
=或IN(部分场景)能走AHI,>、<、LIKE都不行。
搞懂了机制,我们再把开头那个案例拆开看,为什么一个“加速器”会变成“刹车片”。
二、边界一:高并发写入下,AHI从加速器变成锁争用源
回到开头的订单表案例。高并发写入下,AHI对读是加速,对写却是毒药。主要通过两个路径反噬:
路径一:写操作引发的“重建风暴”。
AHI是依附在“索引页”上的。业务每一笔 INSERT 或 UPDATE,只要导致索引页的数据发生变化,这个页对应的AHI条目就可能失效。
写并发一高,AHI就在不停地“失效 -> 重新计算哈希 -> 重建条目”。这个维护过程消耗了大量的CPU算力(sys时间升高),直接挤占了正常业务写入的算力。
路径二:致命的Latch串行化。
当多个并发线程同时去读写AHI时,必须去抢 btr_search_latch。
在我们的案例中,订单表既有高频查详情(读),又有高频改状态(写)。查询线程为了走AHI去抢共享锁,写入线程为了维护AHI去抢排他锁。这把锁直接把原本可以并行的操作,变成了严重内耗的串行排队。
数据对比(真实压测/生产复盘):
开启AHI时:TPS 2000,
btr_search_latch等待占了总耗时的40%,CPU的sys占比达到25%。动态关闭AHI后:TPS瞬间回升到4800,Latch等待几乎消失,CPU使用率反而降到了30%以下。
三、边界二:生效条件极窄,收益与成本严重不对称
AHI不是万能的,它的适用面极窄。这构成了它的第二个边界。
如果业务的主力是范围查询(BETWEEN)、模糊查询(LIKE '%xx%')或者排序聚合(ORDER BY、GROUP BY),AHI根本不会命中。
但是,只要你的表有写入,系统依然会去尝试维护那些已经被建好的AHI条目。读没享受到加速,写却背着沉重的维护包袱。
如果系统里大部分是这类查询,AHI的收益几乎为零,但付出的Latch争用和维护成本却是持续存在的。
四、边界三:分区化只是缓解,没有根治
MySQL 8.0针对 btr_search_latch 做了分区化(innodb_adaptive_hash_index_parts 默认8个),把一把大锁拆成了8把小锁。
这确实缓解了全局争用,但没有消除同一分区内的争用。如果热点页集中在少数几个分区里(比如头部大客户的订单),争用依然存在。而且分区数不是越大越好,分区过多会增加内存开销和查找成本。
五、避坑指南:排查与操作
MySQL 8.4已经将AHI默认关闭,如果你的系统还在老版本,可以通过以下方式判断是否需要关闭:
1. 查Latch等待
SHOW ENGINE INNODB STATUS\G
-- 重点看 SEMAPHORES 段中,btr_search_latch 的 os_waits 是否异常飙升。
2. 查AHI命中率
SHOW STATUS LIKE 'Innodb_adaptive_hash%';
-- 如果 hit_rate 极低,说明建了但没用上,全是维护成本。
3. 动态关闭并观察
SET GLOBAL innodb_adaptive_hash_index = OFF;
关闭后AHI缓存会清空,建议在业务低峰期操作,并持续观察TPS和Latch等待的变化。
六、小结
AHI是InnoDB为高频等值查询设计的自动加速机制,但它的维护成本在写密集场景下会反噬写入性能。btr_search_latch 的争用、条目的频繁失效重建、以及只对等值查询生效的窄条件,构成了三个明确的边界。MySQL 8.4默认关闭AHI,不是功能退化,是权衡后的工程选择。开启还是关闭,取决于你的读写比和查询模式,而不是“默认开就开着”。
小耶在手,SQL 不愁
还有什么想了解的,欢迎留言!小耶一定知无不言言无不尽……我们下次见~