MySQL · 引擎特性 · InnoDB 软链表随手记

本文涉及的产品
RDS PostgreSQL Serverless,0.5-4RCU 50GB 3个月
推荐场景:
对影评进行热评分析
云原生数据库 PolarDB 分布式版,标准版 2核8GB
云数据库 RDS SQL Server,基础系列 2核4GB
简介: 之前一直没去了解这快,这两天正好工作中碰到,这里简单记录下data directory的相关代码,InnoDB不支持INDEX_DIRECTORY,不在本文的讨论范围内. 以下涉及代码部分基于MySQL5.7.12 创建表 在建表时指定DATA DIRECTORY,如下所示: mysql>

之前一直没去了解这块,这两天正好工作中碰到,这里简单记录下data directory的相关代码,InnoDB不支持INDEX_DIRECTORY,不在本文的讨论范围内.

以下涉及代码部分基于MySQL5.7.12

创建表

在建表时指定DATA DIRECTORY,如下所示:

mysql> CREATE TABLE t1 (a INT PRIMARY KEY, b INT) ENGINE=INNODB DATA DIRECTORY='/u01/master';
Query OK, 0 rows affected (0.01 sec)

在指定的目录,会先以库名创建一个目录(如果没有的话),然后将ibd文件存放到其中.而在标准数据目录下,则创建了一个isl后缀的文件,以字符串的格式记录了ibd文件的真正位置

至少需要满足如下条件时data directory 才会生效

  • sql_mode不应该设置NO_DIR_IN_CREATE, 否则data directory会被忽略掉
  • 只有file-per-table开启时的时候才能够使用
  • 临时表不可使用

建表选项的合法性判断参考InnoDB函数:create_table_info_t::create_options_are_invalid

A. 创建数据文件fil_ibd_create

  • 先创建目标位置的ibd文件
  • tablespace flag的`FSP_FLAGS_MASK_DATA_DIR`被设置,并存储到ibd文件的第一个page中FSP_SPACE_FLAGS位置
  • 在数据目录下创建isl文件: RemoteDatafile::create_link_file

B. 存储元数据

软链表的data directory信息是存储在InnoDB系统表SYS_DATAFILES中的,而非frm文件.

参考函数dict_replace_tablespace_in_dictionary

读取

首先,在启动数据库时,会扫描数据表空间,看其路径和存储在系统表中的路径是否是一致的,如果不一致,则更新系统表.

如上例,我们手动删除isl文件,同时将ibd转移到数据目录下,重启后可正常使用,其对应的路径在系统表中被自动更新掉了,代码路径如下:

innobase_start_or_create_for_mysql
|--> dict_check_tablespaces_and_store_max_id
    |--> dict_check_sys_tables
           |--> fil_ibd_open
                |--> dict_update_filepath

但如果两个地方的ibd文件都保留了,服务器就无法判断了,会打印一些信息并将这张表设置为无法访问

[ERROR] InnoDB: A tablespace for `test/t1` has been found in multiple places;
[ERROR] InnoDB: Default location: ./test/t1.ibd, Space ID=619, Flags=1057
[ERROR] InnoDB: Remote location: /u01/master/test/t1.ibd, Space ID=619, Flags=1057
[ERROR] InnoDB: Will not open tablespace `test/t1`
[Warning] InnoDB: Ignoring tablespace `test/t1` because it could not be opened.

真正的路径信息依然存储到tablespace的fil_space_t::name中.而在打开表对象时,也会将路径拷贝到表对象的dict_table_t::data_dir_path中:

dict_load_tablespace
|--> dict_get_and_save_data_dir_path

由于5.7支持general tablespace,允许多个表定义到同一个表空间中,因此多个表对象可能指向同一个数据文件.

当你执行类似`show create table`这样的语句时,路径元数据定义会通过函数ha_innobase::update_create_info传递到上层

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
26天前
|
存储 关系型数据库 MySQL
MySQL 8.0特性-自增变量的持久化
【11月更文挑战第8天】在 MySQL 8.0 之前,自增变量(`AUTO_INCREMENT`)的行为在服务器重启后可能会发生变化,导致意外结果。MySQL 8.0 引入了自增变量的持久化特性,将其信息存储在数据字典中,确保重启后的一致性。这提高了开发和管理的稳定性,减少了主键冲突和数据不一致的风险。默认情况下,MySQL 8.0 启用了这一特性,但在升级时需注意行为变化。
|
27天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
本文介绍了MySQL InnoDB存储引擎中的数据文件和重做日志文件。数据文件包括`.ibd`和`ibdata`文件,用于存放InnoDB数据和索引。重做日志文件(redo log)确保数据的可靠性和事务的持久性,其大小和路径可由相关参数配置。文章还提供了视频讲解和示例代码。
131 11
【赵渝强老师】MySQL InnoDB的数据文件与重做日志文件
|
7天前
|
存储 关系型数据库 MySQL
MySQL引擎InnoDB和MyISAM的区别?
InnoDB是MySQL默认的事务型存储引擎,支持事务、行级锁、MVCC、在线热备份等特性,主索引为聚簇索引,适用于高并发、高可靠性的场景。MyISAM设计简单,支持压缩表、空间索引,但不支持事务和行级锁,适合读多写少、不要求事务的场景。
30 9
|
26天前
|
存储 安全 关系型数据库
InnoDB引擎特性
InnoDB事务型数据库的首选引擎,支持事务安全表(ACID),支持行锁定和外键。MySQL5.5.5之后,InnoDB作为默认存储引擎,InnoDB主要特性有: InnoDB给MySQL提供了具有提交,回滚和崩溃恢复能力的事务安全(ACID兼容)存储引擎。InnoDB锁定在行级并且也在SELECT语句中提供了一个类似Oracle的非锁定读。 InnoDB是为处理巨大数据量的最大性能设计。它的CPU效率可能是任何其他基于磁盘关系的数据库引擎所不能匹敌的。 InnoDB存储引擎完全与MySQL服务器整合,InnoDB存储引擎为在主内存中缓存数据和索引而维持它自己的缓冲池
|
27天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的表空间
InnoDB是MySQL默认的存储引擎,主要由存储结构、内存结构和线程结构组成。其存储结构分为逻辑和物理两部分,逻辑存储结构包括表空间、段、区和页。表空间是InnoDB逻辑结构的最高层,所有数据都存放在其中。默认情况下,InnoDB有一个共享表空间ibdata1,用于存放撤销信息、系统事务信息等。启用参数`innodb_file_per_table`后,每张表的数据可以单独存放在一个表空间内,但撤销信息等仍存放在共享表空间中。
|
27天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL InnoDB的段、区和页
MySQL的InnoDB存储引擎逻辑存储结构与Oracle相似,包括表空间、段、区和页。表空间由段和页组成,段包括数据段、索引段等。区是1MB的连续空间,页是16KB的最小物理存储单位。InnoDB是面向行的存储引擎,每个页最多可存放7992行记录。
|
27天前
|
存储 Oracle 关系型数据库
【赵渝强老师】MySQL的InnoDB存储引擎
InnoDB是MySQL的默认存储引擎,广泛应用于互联网公司。它支持事务、行级锁、外键和高效处理大量数据。InnoDB的主要特性包括解决不可重复读和幻读问题、高并发度、B+树索引等。其存储结构分为逻辑和物理两部分,内存结构类似Oracle的SGA和PGA,线程结构包括主线程、I/O线程和其他辅助线程。
【赵渝强老师】MySQL的InnoDB存储引擎
|
2月前
|
存储 关系型数据库 MySQL
mysql 引擎概述
MySQL存储引擎是处理不同类型表操作的组件,InnoDB是最常用的默认引擎,支持事务、行级锁定和外键。MySQL采用插件式存储引擎架构,支持多种引擎,如MyISAM、Memory、CSV等,每种引擎适用于不同的应用场景。通过`SHOW ENGINES`命令可查看当前MySQL实例支持的存储引擎及其状态。选择合适的存储引擎需根据具体业务需求和引擎特性来决定。
|
7天前
|
SQL 关系型数据库 MySQL
MySQL导入.sql文件后数据库乱码问题
本文分析了导入.sql文件后数据库备注出现乱码的原因,包括字符集不匹配、备注内容编码问题及MySQL版本或配置问题,并提供了详细的解决步骤,如检查和统一字符集设置、修改客户端连接方式、检查MySQL配置等,确保导入过程顺利。
|
27天前
|
SQL 关系型数据库 MySQL
12 PHP配置数据库MySQL
路老师分享了PHP操作MySQL数据库的方法,包括安装并连接MySQL服务器、选择数据库、执行SQL语句(如插入、更新、删除和查询),以及将结果集返回到数组。通过具体示例代码,详细介绍了每一步的操作流程,帮助读者快速入门PHP与MySQL的交互。
34 1

相关产品

  • 云数据库 RDS MySQL 版