DATA_FREE涨了几十G,表文件纹丝不动——InnoDB标记删除与页合并的完整链路

简介: DELETE删了数据,磁盘空间却一点没释放。InnoDB的删除是“标记删除”,行被标记后空间不会立即回收。purge线程清理滞后、页合并阈值苛刻、长事务阻塞——三个因素叠加,导致删除后的空间长期“悬空”。本文拆解InnoDB删除空洞的形成机制、页合并的触发条件,以及OPTIMIZE TABLE和在线重建的实战选择。

大家好,我是小耶,写功课只是为了我踩过的坑,你们别再踩了!

刚转行做DBA那会儿,我干过一件现在想起来还脸红的事。

业务方说订单表数据太多,让清理历史数据。我吭哧吭哧写了个DELETE FROM orders WHERE create_time < '2024-01-01',删了三百多万行。删完还挺得意,跑去跟业务方邀功:“删完了,查询快了不少吧?”

业务方看了一眼磁盘监控,说:“快是快了,但磁盘空间怎么一点没少?还涨了?”

我打开df -h一看,表文件纹丝不动。再跑du -sh,果然还是那么大。当时脑子里只有一个念头:删掉的数据去哪了?

后来才搞明白,InnoDB的DELETE,从来就不是“真删除”。

先把这件事里绕不开的几个概念说清楚:

标记删除——InnoDB执行DELETE时,不会立即从磁盘上抹掉这行数据。它只是在行的头部做一个标记,表示“这行已删除,空间可以被复用”。真正的物理清理,是purge线程在后台异步做的。

purge线程——InnoDB的后台清理线程。它负责清理标记删除的记录和MVCC的旧版本数据。如果它清理不过来,标记删除的记录会持续堆积。

页合并——当相邻两个数据页的空闲空间加起来足够装下一整页时,InnoDB会尝试把两个页合并成一个,释放出一页的空间。触发阈值由MERGE_THRESHOLD控制,默认50%。

DATA_FREE——information_schema.TABLES里的一个字段,表示表空间里已经分配但还没被使用的空间(字节)。它的大小,直接反映“删除空洞”有多严重。

一、DELETE之后到底发生了什么

我那条DELETE执行的时候,InnoDB做的是这样一件事:

在聚簇索引和每一个二级索引里,把这三百万行标记为删除。数据页上的记录其实还在,只是被贴上了“可复用”的标签。

purge线程随后开始异步清理。清理完成后,页上的空间变成“空闲”,可以被后来的INSERT复用。但关键在于——页本身不会被释放回操作系统。除非这一页变空、且满足合并条件,否则它仍然属于这张表。

这就是“删除空洞”:空间在表内部被标记为可用,但表文件不缩小。

我后来查了一下,那三百多万行删除后,DATA_FREE涨了将近20GB。表文件大小?一点没变。

二、页合并为什么没生效

页合并是InnoDB回收空间的唯一内部机制。但它的触发条件,比大多数人想象的苛刻得多。

条件一:相邻页的空闲空间总和 ≥ 一页的容量。

一个16KB的数据页,空闲空间得超过50%(超过8KB),它才“有资格”被考虑合并。但有资格不等于会合并——必须和相邻页的空闲空间加起来能装下一整页的内容,InnoDB才会动手。

条件二:MERGE_THRESHOLD的阈值限制。

默认MERGE_THRESHOLD=50。大量页的空闲空间卡在40%-49%之间——不够触发合并,但已经浪费了将近一半空间。这些页永远不会被合并,空间也永远不会释放。

条件三:purge线程必须先完成清理。

页合并的前提是页上的标记删除记录已经被purge清理掉。如果purge滞后(长事务阻塞、innodb_purge_threads不够),页上还有大量“标记删除但未清理”的记录,空闲空间的计算就不准,合并也无法正确触发。

三条凑在一起的结果:删了三百万行,DATA_FREE涨了20GB,页合并一次都没触发。表文件原地不动,甚至因为新数据插入继续增长。

三、怎么确认空洞有多严重

那次教训之后,我把这个查询加进了日常巡检:

SELECT TABLE_NAME, DATA_LENGTH, DATA_FREE,
       ROUND(DATA_FREE / (DATA_LENGTH + DATA_FREE) * 100, 2) AS free_pct
FROM information_schema.TABLES
WHERE TABLE_SCHEMA = 'your_db' AND TABLE_NAME = 'orders';

free_pct超过30%说明空洞严重,超过50%需要立即处理。

再看purge是不是跟上了:

SHOW GLOBAL STATUS LIKE 'Innodb_history_list_length';

这个值持续增长,说明purge清理不过来,旧版本在堆积。如果有长事务在跑,purge会被直接卡住。

四、解决方案:OPTIMIZE的代价与替代

方案一:OPTIMIZE TABLE

OPTIMIZE TABLE orders;

原理是重建表:建一个新表空间,把数据逐行复制过去,删旧表,重命名新表。重建后的表空间紧凑,空洞全部消除。

代价是磁盘空间短暂翻倍(新旧表同时存在),执行期间大量I/O,大表可能锁表或阻塞写入。MySQL 8.0的OPTIMIZE TABLE对InnoDB走Online DDL,支持并发DML,但大表执行时仍可能引发I/O峰值。

方案二:ALTER TABLE ... ENGINE=InnoDB

ALTER TABLE orders ENGINE=InnoDB, ALGORITHM=INPLACE, LOCK=NONE;

效果类似,但语法更明确地指定Online DDL。适用于MySQL 5.6+,对写入的阻塞更小。

方案三:pt-online-schema-change

Percona的工具,创建影子表、触发器同步增量、原子rename。整个过程对业务透明,但需要额外磁盘空间和更长的执行时间。适合几十GB以上的超大表,且不能接受任何锁表。

方案四:预防——别一次性大DELETE

最根本的预防:不要用一次性大DELETE。用游标分批删除,每批几千行,提交后再删下一批。这样purge有机会跟上,页合并也更可能触发。配合innodb_purge_threads=4(默认值通常够用),减少长事务。

五、小结

DELETE删了数据空间不释放,根因在InnoDB的标记删除机制和页合并的苛刻条件。DATA_FREE是判断空洞严重程度的核心指标。OPTIMIZE TABLE能解决但代价大,ALTER TABLE ... ENGINE=InnoDB是更安全的在线替代。最根本的方案是避免大删除——分批删除,让purge和页合并有机会工作。

那次教训之后,我再也没写过一次性大DELETE。

小耶在手,SQL 不愁

还有什么想了解的,欢迎留言!小耶一定知无不言言无不尽……我们下次见~

相关文章
|
5天前
|
云安全 人工智能 运维
当攻击全面Agent化,你的安全防御能否跟上AI Speed?
多起客户侧AK泄露事件应急的真实观察
1242 4
|
28天前
|
人工智能 JSON API
全网刷屏的 Jev 模型正式开放!一手实战测评 + 保姆级教程
全网爆火的 Jev 模型是什么?有什么用?怎么使用?怎么接入 AI 编程工具?效果真的好么?傻子可懂的 Jev 保姆级实战教程 + 项目实战测评来啦
9791 32
|
8天前
|
存储 人工智能 安全
千问办公官网入口网页版登录:qwenwork.cn 注册送2000积分、登录送100积分
阿里云千问办公(QwenWork)是AI智能工作平台,支持一句话生成PPT、表格、网页、视频及数据分析。个人免费版送2000积分+每日登录赠100分,含1GB存储、5个发布页;企业版198元/席/月起。阿里千问办公QwenWork官网:https://t.aliyun.com/U/0VCTGt 阿里AI工作平台,一句话完成数据分析、PPT 生成、视频剪辑、网页搭建等复杂任务
|
3天前
|
人工智能 API 开发工具
DeepSeek Harness 神插件:白嫖 13 家大厂模型
`dsh-our-free-model` 是 DeepSeek Harness 神级插件:零配置、零API Key、零账号,聚合13家大厂免费模型(含DeepSeek V4.1 Flash、Kimi K3等),支持本地网关、用量看板与自动降级,真正实现“白嫖即用”。
|
14天前
|
存储 人工智能 并行计算
大模型本地部署终端选型方法论:以 Qwen3.8-27B 为例的四档分层完整流程
本文提出一套大模型本地部署终端选型方法论:定约束、定档位、定框架、定参数四步决策法,配合入门、主力、质量、无损四档分层模型。以 Qwen3.8-27B 实测数据为例,逐环节解读显存、带宽、存储、散热、系统、预算等要素,给出面向不同预算的优选方案、决策自查清单与市场观察框架。文末前瞻 AI 笔记本的 CPU+GPU 与统一内存两条路线,论证四步决策法在新品类上的延续性。
|
5天前
|
Web App开发 人工智能 JavaScript
太猛了,一个月干到15W+,给大家推荐一个最近爆火的开源逆向工具:REA
REA(Reverse Engineer Anything)是近期爆火的开源AI逆向工具,4月发布,1个月内斩获15万+ Star。它让AI Agent无需源码即可分析二进制、APK、JS/Electron、HAR包等17类目标,自动反编译、生成可运行代码,并强制返回带证据与局限的结论。全本地执行,MIT协议,支持Hopper/Ghidra/IDA等引擎,一行命令即可上手。
628 1
太猛了,一个月干到15W+,给大家推荐一个最近爆火的开源逆向工具:REA
|
13天前
|
人工智能 JSON 自然语言处理
2026 年 Jev 决策模型深度拆解:原理解读、实战测评与保姆级落地教程
有一款特殊AI模型在开发者圈子刷屏,它摒弃传统大模型擅长的对话聊天能力,专注做高速结构化决策,它就是TypeSafe AI推出的Jev模型。该模型由ChatGPT共同发明人Diogo Almeida主导研发,定位为**System One Model(系统一模型)**,对标人类大脑快速直觉判断的思维模式,在响应延迟、调用成本、结构化输出稳定性上相比传统生成式大模型有着巨大差异。本文会完整拆解Jev底层原理、三大核心原语能力、适用业务场景,同时提供可直接运行的curl、Python代码示例,并且结合多组实测数据,客观分析模型优势与能力边界,帮助普通开发者和AI应用从业者快速上手落地。
933 1
|
9天前
|
人工智能 JSON 自然语言处理
2026 年 Jev 决策模型全解析:核心原理拆解,性能实战测评与落地部署教程
有一款特殊AI模型在开发者圈子刷屏,它摒弃传统大模型擅长的对话聊天能力,专注做高速结构化决策,它就是TypeSafe AI推出的Jev模型。该模型由ChatGPT共同发明人Diogo Almeida主导研发,定位为System One Model(系统一模型),对标人类大脑快速直觉判断的思维模式,在响应延迟、调用成本、结构化输出稳定性上相比传统生成式大模型有着巨大差异。本文会完整拆解Jev底层原理、三大核心原语能力、适用业务场景,同时提供可直接运行的curl、Python代码示例,并且结合多组实测数据,客观分析模型优势与能力边界,帮助普通开发者和AI应用从业者快速上手落地。
593 0