关于MySQL 5.7新建索引Online DDL的一次友(HU)好(DUI)交流

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群版 2核4GB 100GB
推荐场景:
搭建个人博客
云数据库 RDS MySQL,高可用版 2核4GB 50GB
简介: 前一段时间,公司新切换到新的云服务提供商,切换过程还算顺利,新接到需求优化查询效率(详细优化过程查看上篇文章),需要新增索引,为了避免不必要的问题(害怕数据库服务是经过魔改的),向服务商咨询了新建索引是否支持Online DDL,然后发生了一次友好的技术交流

起因

前一段时间,公司新切换到新的云服务提供商,切换过程还算顺利,新接到需求优化查询效率(详细优化过程查看上篇文章),需要新增索引,为了避免不必要的问题(害怕数据库服务是经过魔改的),向服务商咨询了新建索引是否支持Online DDL,然后发生了一次友好的技术交流

交流过程

Round 1

  • 我:新增索引支持online ddl吗?会不会锁表?
  • 服务商:版本是多少?
  • 我:5.7
  • 服务商:8.0的话就可以
  • 我:MySQL 5.7的话只有等待MDL锁才会锁表,复制数据是不会的,你们是有做格外修改?
  • 服务商:我们研发说是会锁表的哦,5.6 & 5.7并不是真正的online ddl操作,不是原子性的,8.0才真正实现
  • 服务商:你可以参考一下这个文档https://dev.mysql.com/doc/refman/5.7/en/innodb-online-ddl.html

Round 2

看到他发出MySQL官方文档,我立马就不困了,那就是说是根正苗红的MySQL咯,这我熟啊,让我参考文档是吧,那就按文档说话,开始附上文档截图交流


  • 我:新增索引的话,文档上是可以不重建表,并发DML的

Online DDL索引支持文档

  • Rebuilds Table:是否需要重建表
  • Permits Concurrent DML:是否允许并发DDL

注意:这里只讨论新增索引,其他DDL请查阅支持文档


  • 服务商:

如果存在表的调用,比如增删改查,对表做ddl操作,这个是会存在mdl锁的

锁等待时多个进程而不是只看当前的这一个线程的操作,一个线程同时间操作一个表,不管是加表锁,行锁还是元数据锁都是不影响的

对于服务的影响肯定是ddl操作期间的操作阻塞了服务对这个表的其他操作


  • 我:MySQL Online DDL会加语句准备和提交阶段短时间的加MDL写锁,等待写锁及持有写锁的过程会阻塞其他DML操作,并不会阻塞整个DDL过程


Online DDL并发性能-MDL锁小节

Online DDL分为三个阶段

  1. 初始化:会加共享锁
  2. 执行:可能会在语句准备期间短暂使用独占锁
  3. 提交表定义:短时间升级为独占锁,用于提交表定义

所以服务商说:“ddl操作期间的操作阻塞了服务对这个表的其他操作”这是不正确的。

不过必须注意该表是否参与长事务,不然在等待长事务释放锁的过程中,会阻塞后面的DML、DQL


  • 服务商:文档上还有参数的配置,在线ddl的过程和参数配置也是有很大关系的


  • 我:默认不指定会按MySQL能使用的online方式去执行

MySQL Online DDL文档

不指定ALGORITHM,会优先使用 INPLACE,不支持才会降级为 COPY

不指定LOCK,也会尽量不加锁执行

总结

当然,最后创建索引是在业务低峰期执行的,Online DDL正如我上面所说的,并不是完全不加锁,可以的话当然选择在最佳的时间执行,避免对上线业务有影响

扩展资料

MySQL官方参考手册

MySQL · 源码阅读 · 白话Online DDL

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
3天前
|
SQL 存储 关系型数据库
mysql加索引真的会锁表吗?揭秘背后的技术细节与规避策略
【8月更文挑战第16天】在数据库管理中,添加索引能大幅提升查询效率。MySQL执行此操作时的锁定行为常引起关注。文章详细解析MySQL中索引添加时的锁定机制及其原理。不同存储引擎及SQL语句影响锁定策略:MyISAM需全表锁定;InnoDB提供更灵活选项,如使用`ALTER TABLE... LOCK=NONE`可在加索引时允许读写访问,尽管可能延长索引构建时间。自MySQL 5.6起,在线DDL技术可进一步减少锁定时间,通过`ALGORITHM=INPLACE`和`LOCK=NONE`实现近乎无锁的表结构变更。合理配置这些选项有助于最小化对业务的影响并保持数据库高效运行。
14 4
|
3天前
|
SQL JavaScript 关系型数据库
Mysql索引不当引发死锁问题
本文通过真实案例解析了MySQL在高并发环境下出现死锁的问题。数据库表`t_award`包含多个索引,但在执行特定SQL语句时遭遇索引失效,导致更新操作变慢并引发死锁。分析发现,联合索引`(pool_id, identifier, status, is_redeemed)`因`identifier`允许为空值而导致索引部分失效。此外,`pool_id`上的普通索引产生的间隙锁在高并发下加剧了死锁风险。为解决此问题,文中提出了调整索引顺序至`(pool_id, status, is_redeemed, identifier)`等方案来优化索引使用,进而减轻死锁现象。
|
9天前
|
SQL 存储 关系型数据库
"MySQL增列必锁表?揭秘InnoDB在线DDL,让你的数据库操作飞一般,性能无忧!"
【8月更文挑战第11天】在数据库领域,MySQL凭借其稳定高效的表现深受开发者喜爱。对于是否会在给数据表添加列时锁表的问题,MySQL的行为受版本、存储引擎等因素影响。从5.6版起,InnoDB支持在线DDL,可在改动表结构时保持表的可访问性,避免长时间锁表。而MyISAM等则需锁表完成操作。例如,在使用InnoDB的表上运行`ALTER TABLE users ADD COLUMN email VARCHAR(255);`时,通常不会完全锁表。虽然在线DDL提高了灵活性,但复杂操作或大表变更仍可能暂时影响性能。因此,进行结构变更前应评估其影响并择机执行。
31 6
|
6天前
|
缓存 NoSQL Redis
一天五道Java面试题----第九天(简述MySQL中索引类型对数据库的性能的影响--------->缓存雪崩、缓存穿透、缓存击穿)
这篇文章是关于Java面试中可能会遇到的五个问题,包括MySQL索引类型及其对数据库性能的影响、Redis的RDB和AOF持久化机制、Redis的过期键删除策略、Redis的单线程模型为何高效,以及缓存雪崩、缓存穿透和缓存击穿的概念及其解决方案。
|
19天前
|
存储 SQL 关系型数据库
(六)MySQL索引原理篇:深入数据库底层揭开索引机制的神秘面纱!
《索引原理篇》它现在终于来了!但对于索引原理及底层实现,相信大家多多少少都有了解过,毕竟这也是面试过程中出现次数较为频繁的一个技术点。在本文中就来一窥`MySQL`索引底层的神秘面纱!
|
19天前
|
SQL 存储 关系型数据库
(五)MySQL索引应用篇:建立索引的正确姿势与使用索引的最佳指南!
在本篇中,则重点讲解索引应用相关的方式方法,例如各索引优劣分析、建立索引的原则、使用索引的指南以及索引失效与索引优化等内容。
|
22天前
|
SQL 算法 关系型数据库
Mysql Online DDL
Mysql Online DDL
15 2
|
24天前
|
SQL 缓存 关系型数据库
MySQL 查询索引失效及如何进行索引优化
MySQL 查询索引失效及如何进行索引优化
60 1
|
13天前
|
缓存 关系型数据库 MySQL
MySQL调优秘籍曝光!从索引到事务,全方位解锁高可用秘诀,让你的数据库性能飞起来!
【8月更文挑战第6天】MySQL是顶级关系型数据库之一,其性能直接影响应用的高可用性与用户体验。本文聚焦MySQL的高性能调优,从索引设计到事务管理,逐一解析。介绍如何构建高效索引,如联合索引`CREATE INDEX idx_order_customer ON orders(order_id, customer_id);`,以及索引覆盖查询等技术。
39 0
|
19天前
|
存储 SQL 关系型数据库
(四)MySQL之索引初识篇:索引机制、索引分类、索引使用与管理综述
本篇中就对MySQL的索引机制有了全面认知,从索引的由来,到索引概述、索引管理、索引分类、唯一/全文/联合/空间索引的创建与使用等内容,进行了全面概述。