执行计划进阶:读懂统计信息与基数估算,理解优化器的“思考方式”

简介: 执行计划是SQL优化的核心工具,但很多人只关注type和Extra,忽略了执行计划背后的决策依据——统计信息与基数估算。本文从优化器的决策逻辑出发,解释统计信息如何影响基数估算、基数估算如何决定执行计划的选择。通过真实案例展示统计信息过旧如何导致优化器“选错路”,以及如何通过更新统计信息、使用扩展统计等方法来纠正。帮助读者从“看懂执行计划”进阶到“理解优化器为什么这么选”。

大家好,我是小耶,写功课只是为了我踩过的坑,你们别再踩了!

上周我们讲了怎么看执行计划——type、key_len、rows、filtered、Extra,每个字段都拆开讲了。但有一个问题一直没回答:优化器是根据什么来决定走哪个执行计划的?

你肯定遇到过这种情况:明明有合适的索引,优化器却选了全表扫描;明明A计划更快,优化器却选了B计划。这时候你可能会骂优化器“笨”,但其实它只是做了一个“基于现有信息的最优判断”——而它依赖的“现有信息”,就是​统计信息​。

如果统计信息不准,优化器的判断就会出错,最终执行计划就会跑偏。

今天我们把执行计划再往深挖一层,讲清楚统计信息和基数估算到底是怎么回事,以及当执行计划“跑偏”时,怎么从统计信息入手把它拉回来。

一、优化器的决策逻辑:它不是“猜”,而是“算”

数据库优化器是基于代价(Cost-Based) 的。它不会凭感觉选执行计划,而是会计算每种可能的执行方式的“代价”,然后选代价最小的那个。

这个“代价”是怎么算出来的?核心公式可以简化为:

代价 ≈ 扫描行数 × 单行处理成本 + 其他开销

其中“扫描行数”就是基数估算(Cardinality Estimation) ——优化器估算的、某个操作会返回的行数。

而基数估算依赖的数据,就是​统计信息​——表有多少行、每列有多少个不同值、数据分布如何。

二、统计信息:优化器的“眼睛”

统计信息是优化器做出决策的依据。如果统计信息不准,优化器的判断就会跟着错。

统计信息主要包括以下几类:

统计信息类型 作用 影响
表级行数 估算全表扫描的基数 决定是否走全表扫描
列级不同值数量(NDV) 估算过滤条件的选择率 决定索引是否被选中
列级NULL值比例 影响条件判断的准确性 影响WHERE条件的估算
数据分布(直方图) 了解列值的分布情况 影响范围查询的估算

举个例子:一张订单表有1000万行,status列有3个不同值(PAID、UNPAID、REFUND)。如果统计信息准确,优化器知道status='PAID'大约占30%,也就是300万行。如果统计信息过旧(比如只统计到表有100万行),优化器会估算status='PAID'只有30万行,从而可能错误地选择索引扫描而非全表扫描——或者反过来。

三、基数估算:优化器的“算力”

有了统计信息,优化器就开始做基数估算——预测每个操作会返回多少行。

基数估算的核心是选择率(Selectivity) 计算。选择率表示某个过滤条件能筛选掉多少数据。

选择率越高,过滤掉的数据越多,返回的行数越少;选择率越低,返回的行数越多。

对于等值条件(WHERE status = 'PAID'),选择率 ≈ 1 / 该列的不同值数量。如果status有3个不同值,选择率约33%。

对于范围条件(WHERE create_time > '2026-01-01'),选择率依赖直方图统计信息来估算数据分布。

如果统计信息不准确,选择率就会算错,基数估算就会偏差,最终执行计划就可能选错。

四、真实案例:统计信息过旧导致的执行计划跑偏

我遇到过这样一个案例:一张日志表有500万行,user_id列上有索引。业务方反馈一条查询突然变慢:

SELECT * FROM user_logs WHERE user_id = 12345 AND create_time > '2026-01-01';

正常情况下,这个查询应该走(user_id, create_time)复合索引,扫描几十行就返回。但实际执行计划显示type=ALL,全表扫描。

查看统计信息后发现,这张表的统计信息还是三个月前收集的——当时表只有50万行。优化器根据旧统计信息估算:user_id = 12345可能返回很多行(因为旧数据中该用户有大量记录),全表扫描可能更“划算”。

执行ANALYZE TABLE user_logs更新统计信息后,优化器重新估算,发现user_id = 12345在500万行中只有几十条记录,复合索引被正确选中,查询从5秒降到了0.05秒。

五、如何检查统计信息是否准确

方法一:对比EXPLAIN的rows与实际行数

执行EXPLAIN后,看rows列的估算值。然后实际执行查询(或使用EXPLAIN ANALYZE),对比实际扫描行数。如果估算值和实际值差了一个数量级以上,统计信息很可能过旧了。

方法二:查看统计信息的最后更新时间

-- MySQL
SELECT table_name, update_time FROM information_schema.tables WHERE table_name = 'your_table';

如果统计信息已经几周甚至几个月没有更新,而表的数据变化很大,就需要执行ANALYZE TABLE。

方法三:查看索引的Cardinality

SHOW INDEX FROM your_table;

Cardinality列显示索引列的不同值数量估算。如果Cardinality与实际明显不符,说明统计信息需要更新。

六、如何维护统计信息

1. 定期执行ANALYZE TABLE

对于数据变化频繁的表,建议设置定时任务每天或每周执行ANALYZE TABLE。MySQL 8.0的统计信息虽然是持久化的,但自动更新阈值默认是表数据变化10%,对于核心业务表,这个阈值可能偏大。

2. MySQL 8.0的直方图支持

MySQL 8.0支持为列创建直方图统计信息,对于数据分布不均匀的列特别有用:

ANALYZE TABLE your_table UPDATE HISTOGRAM ON column_name WITH 100 BUCKETS;

3. 关注统计信息的更新时机

建议在以下操作后执行ANALYZE TABLE:

  • 批量数据导入后
  • 大量数据删除后
  • 表结构变更后(如添加索引)
  • 定期维护窗口(如每周日凌晨)

七、进阶:当统计信息准确但执行计划仍然跑偏时

有时候统计信息是准确的,但优化器仍然选择了次优计划。这种情况可能的原因包括:

  • ​参数设置问题​:某些数据库参数(如eq_range_index_dive_limit)影响优化器的行为
  • 优化器提示(Hint) :在极端情况下,可以使用USE INDEX或FORCE INDEX引导优化器

但在使用Hint之前,建议先用EXPLAIN ANALYZE确认真实执行情况,再判断是否需要强制干预。

执行计划是优化器的“决策结果”,统计信息是优化器的“决策依据”,基数估算是优化器的“决策算法”。这三者形成一个完整的决策链条:​统计信息 → 基数估算 → 执行计划​。

如果执行计划看起来不合理,不要急着骂优化器“笨”。先检查统计信息是否准确——大概率是优化器“看错了”,而不是“算错了”。学会从这个角度理解执行计划,你就能从“看懂EXPLAIN”升级到“理解优化器为什么这么选”,在SQL优化上真正做到“知其然也知其所以然”。

小耶在手,SQL 不愁

还有什么想了解的,欢迎留言!小耶一定知无不言言无不尽……我们下次见~

相关文章
|
2月前
|
存储 消息中间件 SQL
Redis大Key优化完全指南:三种类型、五种拆分策略、一套渐进式方案
大key是Redis最隐蔽的性能杀手——它不会直接报错,只会让你半夜收到延迟告警、主从断开、请求超时。本文从大key的三种类型出发,拆解String、Hash、Set、ZSet、List五类数据结构的拆分策略,提供渐进式拆分的完整方案,并给出数据结构选型的“防患于未然”建议,帮助读者从“发现大key”走向“根治大key”。
|
2月前
|
存储 架构师 数据库
从DBA到数据架构师:技术债务管理是分水岭
“架构债”在业务快速迭代中被不断放大,最终成为系统稳定性的定时炸弹。本文从数据架构的视角出发,拆解数据库技术债务的四种典型类型,提供识别、评估和偿还的完整方法论,帮助读者从“数据库管理员”升级为“数据架构师”。
|
2月前
|
SQL 缓存 NoSQL
Redis缓存三大坑:穿透、击穿、雪崩,一次讲透
缓存穿透、击穿、雪崩,名字像兄弟但成因解法完全不同。本文深入讲解三种问题的原理、实现细节与隐藏的坑,覆盖布隆过滤器、互斥锁、逻辑过期、过期随机化等解法。
|
2月前
|
SQL JSON 移动开发
SQL派生表优化实战:从物化机制到LATERAL JOIN的完整进阶
很多人只知道“子查询改JOIN就快了”,但不知道为什么,也不知道什么时候该改、什么时候不该改。本文从派生表的物化机制出发,拆解临时表膨胀、索引失效的根因,通过真实案例对比派生表、CTE、LATERAL JOIN三种写法的性能差异,帮助读者从“知道现象”升级到“理解原理”。
|
2月前
|
存储 固态存储 关系型数据库
从月账单5万到3.5万:云数据库成本优化的完整复盘
上云本应是降本增效,但很多企业上云之后,账单反而越滚越大。实例规格买高了、历史数据堆在SSD上、测试环境没人关、过期快照没清理——每一笔费用都在悄悄累积。本文从云账单的三大“黑洞”出发,拆解云成本失控的根因,给出实例降配、冷热数据分层、僵尸资源清理三条可落地的优化路径,帮助DBA和运维工程师用数据驱动成本优化,让每一分钱都花在刀刃上。
|
2月前
|
SQL 运维 监控
慢查询日志的“高级用法”:从找慢SQL到做容量规划
慢查询日志是DBA最熟悉的工具,但大多数人只用它来找“跑得慢的SQL”。如果只做到这一步,你只用了慢查询日志20%的价值——剩下的80%是建立性能基线、预测容量瓶颈、评估优化效果、发现潜在风险。本文从慢查询日志的进阶用法出发,讲解如何通过持续记录慢查询建立性能基线、如何通过慢查询趋势预测容量瓶颈、如何将慢查询日志从“故障排查工具”升级为“容量规划工具”,帮助读者从“出了问题再查”升级到“看着趋势主动调整”。
|
2月前
|
SQL JSON 数据库
SQL性能调优进阶:从“会看执行计划”到“会诊断整个系统”
一条SQL慢,可能有一百种原因——SQL写法有问题、索引没建对、统计信息过旧、参数没调好、磁盘I/O满了、内存不够、网络抖动……很多DBA的做法是“先查SQL”,但真正的问题往往不在SQL本身。本文从“分层诊断”的思路出发,建立一套从SQL层→数据库层→操作系统层的逐层排查方法论,帮助读者在面对性能问题时不再“眉毛胡子一把抓”。
|
3月前
|
存储 人工智能 关系型数据库
湖库一体:2026年数据库架构的“终极答案”还是新瓶装旧酒?
2026年6月,OceanBase发布湖库一体AI数据库,阿里云PolarDB年初已推出AI数据湖库(Lakebase),Databricks也在6月推出了LTAP架构。“湖库一体”成为2026年数据库圈最热的概念之一。本文从湖库一体的概念定义出发,拆解其技术原理,对比“湖仓一体”与“湖库一体”的差异,分析三大厂商的落地路径,并讨论这一趋势对DBA和架构师的现实意义。
|
2月前
|
SQL 关系型数据库 MySQL
UNION vs UNION ALL:一个“ALL”字,性能差了一个数量级
UNION和UNION ALL的区别很多人知道,但INTERSECT和EXCEPT的执行机制、性能差异,以及如何用JOIN和子查询替代,很多人并不清楚。本文从集合操作的执行计划出发,拆解UNION去重的“隐形代价”、INTERSECT与INNER JOIN的本质差异、EXCEPT与NOT EXISTS的性能对比,并通过真实案例展示集合操作在业务场景中的正确用法与避坑指南,帮助读者从“会写集合操作”升级到“理解集合操作的底层逻辑”。
|
2月前
|
SQL JSON 算法
SQL执行计划的“成本模型”:读懂cost,理解优化器为什么选这个计划
EXPLAIN能告诉你优化器选了哪个执行计划,但说不出它为什么这么选——明明有索引它却走全表扫描,明明A计划更快它却选了B计划。优化器不靠猜,它靠一套成本模型(Cost Model)做决策。本文从优化器的成本模型出发,拆解cost的构成(IO_cost、CPU_cost、memory_cost),讲解如何通过EXPLAIN FORMAT=JSON和OPTIMIZER_TRACE看到优化器的“思考过程”,并通过真实案例展示优化器“算错账”的根因,帮助读者从“知道选了谁”升级到“理解为什么选它”。

热门文章

最新文章