mysql ibd文件特别大的问题

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: mysql ibd文件特别大的问题

mysql innodb引擎 数据文件远大于实际数据量

  • 版本:mysql 5.7

当你删除数据时,mysql并不会回收,被已删除数据的占据的存储空间,以及索引位, 或者其他页分裂问题也会产生碎片。

show variables like "innodb_file_per_table";  #查看当前数据库的表空间管理类型(on表示独立表空间开启,5.6默认开启独立)

-- 列出所有已经产生碎片的表
select table_schema db, table_name, round(data_free/1024/1024, 2) data_free, engine,table_rows, round((data_length+index_length)/1024/1024,2) length
from information_schema.tables   where table_schema not in ('information_schema', 'mysql') and data_free > 0;

-- 查询并计算碎片率
select table_schema db, table_name, engine,table_rows, round(data_free/1024/1024, 2) data_free_M, round((data_length+index_length)/1024/1024,2) length_M , round(data_free/(data_free + data_length+index_length),2) rate  
from information_schema.tables   where table_schema not in ('information_schema', 'mysql') and data_free > 0 order by data_free_M desc ,rate desc;

方法一:不推荐

我目前出现此类问题的主要是开发测试环境,所以可以在一个没人使用的时候,(比如打包,提测时):

1、创建原表的副本;
2、修改原表名字以备份;
3、修改副本表名为原表名,以后就是使用这张表了;
4、确认没问题后再回头删除不要了的备份表;

备份表的操作参考链接:https://blog.csdn.net/weixin_44032384/article/details/108458656?spm=1001.2014.3001.5502

  • 直接查询出改表的创建语句,包括了外键、索引等等等:
    SHOW CREATE TABLE `tb_a`;
    -- 然后执行查询出来的create语句,最后插入数据: 
    insert into tb_a_copy select * from tb_a;
    

方法二:

OPTIMIZETABLE [tablename], 只适用于独立表空间

-- 库名.表名   清理2个表的碎片(逗号隔开即可)
OPTIMIZE TABLE   [数据库名].[表名], [数据库名].[表名] ;
例: OPTIMIZE TABLE   log.mybatis_sql_log;

注意:.在OPTIMIZE TABLE 运行过程中,MySQL会锁表;

建议;
1、可以根据实际情况每周或者每月清理一次;
2、一般只需要对含有可变长度行的表(含有VARCHAR, BLOB或TEXT列的表)的表进行清理即可。
3、不仅会锁表,而且执行时间可能比较长,建议在凌晨使用脚本定时执行;

此方法更多描述参考链接:https://blog.csdn.net/qq_29883183/article/details/80421117

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
12天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
119 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
1月前
|
SQL 关系型数据库 MySQL
|
1月前
|
存储 关系型数据库 MySQL
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
PACS系统 中 dicom 文件在mysql 8.0 数据库中的 存储和读取(pydicom 库使用)
32 2
|
1月前
|
SQL 存储 关系型数据库
SQL文件导入MySQL数据库的详细指南
数据库中的数据转移是一项常规任务,无论是在数据迁移过程中,还是在数据备份、还原场景中,导入导出SQL文件显得尤为重要。特别是在使用MySQL数据库时,如何将SQL文件导入数据库是一项基本技能。本文将详细介绍如何将SQL文件导入MySQL数据库,并提供一个清晰、完整的步骤指南。这篇文章的内容字数大约在
174 1
|
2月前
|
SQL 关系型数据库 MySQL
Python小技巧——将CSV文件导入到MySQL数据库
Python小技巧——将CSV文件导入到MySQL数据库
55 0
|
3月前
|
存储 SQL 关系型数据库
mysql体系结构及主要文件
了解MySQL的体系结构和它的主要文件,能够帮助数据库管理员和开发者更好地管理和优化数据库。这对于数据库的正常运行、性能优化、数据恢复和系统维护来说是至关重要的。通过对这些组件的深入理解,可以更容易地解决数据库问题,并在必要时定制或调整数据库的行为以满足特定的应用需求。
62 0
|
3月前
|
SQL 关系型数据库 MySQL
【MySQL核心】MySQL无法启动?批量恢复MySQL 物理文件-拯救即将跑路的你
【MySQL核心】MySQL无法启动?批量恢复MySQL 物理文件-拯救即将跑路的你
|
3月前
|
关系型数据库 MySQL Windows
MySQL数据导入:MySQL 导入 Excel 文件.md
MySQL数据导入:MySQL 导入 Excel 文件.md
|
4月前
|
存储 关系型数据库 MySQL
面试题MySQL问题之FastDFS中的文件重复上传如何解决
面试题MySQL问题之FastDFS中的文件重复上传如何解决
43 1
|
4月前
|
关系型数据库 MySQL Java