mysql autocommit对myisam,innodb的性能影响

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

前段时间把数据库的部分myisam表转变成了innodb了,感觉慢了好多。我知道autocommit对innodb性能有一定的影响,但不知道影响有这么大。如何关闭autocommit,请参考MySQL禁用autocommit,以及遇到的问题 ,为了解决这个问题,我做了一些测试,包括autocommit对myisam,innodb影响。

 

一,测试autocommit对myisam的影响

1,准备测试表和数据

Java代码   收藏代码
  1. mysql>  CREATE TABLE `test_test` (     //测试表  
  2.  ->   `id` int(11) NOT NULL auto_increment,  
  3.  ->   `num` int(11) NOT NULL default '0',  
  4.  ->    PRIMARY KEY  (`id`)  
  5.  ->  ) ENGINE=MyISAM  DEFAULT CHARSET=utf8 AUTO_INCREMENT=1 ;  
  6. Query OK, 0 rows affected (0.00 sec)  
  7.   
  8. mysql> delimiter ||  
  9. mysql> create procedure p_test(pa int(11))  
  10.  ->  begin  
  11.  ->  
  12.  ->   declare max_num int(11default 100000;  
  13.  ->   declare i int default 0;  
  14.  ->   declare rand_num int;  
  15.  ->  
  16.  ->   select count(id) into max_num from test_test;  
  17.  ->  
  18.  ->   while i < pa do  
  19.  ->           if max_num < 100000 then  
  20.  ->                   select cast(rand()*100 as unsigned) into rand_num;  
  21.  ->                   insert into test_test(num)values(rand_num);  
  22.  ->           end if;  
  23.  ->           set i = i +1;  
  24.  ->   end while;  
  25.  ->  end||  
  26. Query OK, 0 rows affected (0.03 sec  

 2,测试autocommit开启的情况

Java代码   收藏代码
  1. mysql> call p_test(100000)||        //插入10000条数据  
  2. Query OK, 1 row affected (0.86 sec)  
  3.   
  4. mysql> truncate table test_test;     //清空表  
  5. Query OK, 0 rows affected (0.00 sec)  
  6.   
  7. mysql> optimize table test_test;    //优化一下表,收回资源,确保测试的公平性  

这样我连续做了三次测试,平均一下插入10000的数据差不多要0.86秒 。关于optimize来优化表,请参考optimize table在优化mysql时很重要

3,autocommit关闭的情况下

Java代码   收藏代码
  1. mysql> call p_test(100000)||        //插入10000条数据  
  2. Query OK, 1 row affected (0.83 sec)  
  3.   
  4. mysql> commit;  
  5. Query OK, 0 rows affected (0.00 sec)  
  6.   
  7. mysql> truncate table test_test;     //清空表  
  8. Query OK, 0 rows affected (0.00 sec)  
  9.   
  10. mysql> commit;  
  11. Query OK, 0 rows affected (0.00 sec)  
  12.   
  13. mysql> optimize table test_test;    //优化一下表,收回资源,确保测试的公平性   

这样我连续做了三次测试,平均一下插入10000的数据差不多要0.83秒 。为了使init_connect='SET autocommit=0' 启作用,我是换了个用户测试的。如果在执行储存过程的时候遇到这样的问题,

ERROR 1370 (42000): execute command denied to user 'mysql'@'localhost' for routine 'test.p_test'

解决办法是:grant execute on procedure p_test to 'mysql'@localhost;

由上面的测试数据我们可以看出,autocommit对myisam没有多大的影响。

二,测试autocommit对innodb的影响

1,测试autocommit开启的情况

Java代码   收藏代码
  1. mysql> alter table test_test type=innodb;          //将表改为innodb  
  2. Query OK, 0 rows affected, 1 warning (0.02 sec)  
  3. Records: 0  Duplicates: 0  Warnings: 1  
  4.   
  5. mysql> call p_test(10000);                       //插入数据  
  6. Query OK, 1 row affected (16.32 sec)  
  7.   
  8. mysql> truncate table test_test;                //删除数据  
  9. Query OK, 0 rows affected (0.02 sec)  

我也做了3次测试,都是在16点几秒。myisam插入10000条数据,都不到一秒,而innodb要十几秒,差了20多倍,太杯具了。

2,测试autocommit关闭的情况

Java代码   收藏代码
  1. mysql> call p_test(10000);                       //插入数据  
  2. Query OK, 1 row affected (0.61 sec)  
  3.   
  4. mysql> commit;                                  //提交  
  5. Query OK, 0 rows affected (0.02 sec)  
  6.   
  7. mysql> truncate table test_test;                //删除数据  
  8. Query OK, 0 rows affected (0.00 sec)  
  9.   
  10. mysql> commit;                                  //提交  
  11. Query OK, 0 rows affected (0.00 sec)  

我也测试了3次,第一次测试的时候,我以为我只插入了1000条,不然怎么会差距这么大呢。我又测试了二次,测试用时差不多,都是在0.6秒左右。autocommit对innodb的影响太大了,差了快30倍 。我汗

所以我的建议是把mysql的autocommit自动提交功能关闭,这样可以提高mysql的性能,特别是innodb表比较多的情况下,不是提高一点点。如果关闭了autocommit,不要忘了commit。不然mysql服务器挂掉了,或者重起了,数据就丢失了。

相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
存储 关系型数据库 MySQL
MySQL InnoDB数据存储结构
MySQL InnoDB数据存储结构
|
1月前
|
存储 缓存 关系型数据库
MySQL的varchar水真的太深了——InnoDB记录存储结构
varchar(M) 能存多少个字符,为什么提示最大16383?innodb怎么知道varchar真正有多长?记录为NULL,innodb如何处理?某个列数据占用的字节数非常多怎么办?影响每行实际可用空间的因素有哪些?本篇围绕innodb默认行格式dynamic来说说原理。
834 6
MySQL的varchar水真的太深了——InnoDB记录存储结构
|
2月前
|
存储 安全 关系型数据库
|
15天前
|
存储 关系型数据库 MySQL
MySQL引擎对决:深入解析MyISAM和InnoDB的区别
MySQL引擎对决:深入解析MyISAM和InnoDB的区别
31 0
|
23天前
|
存储 关系型数据库 MySQL
MySQL数据库性能大揭秘:表设计优化的高效策略(优化数据类型、增加冗余字段、拆分表以及使用非空约束)
MySQL数据库性能大揭秘:表设计优化的高效策略(优化数据类型、增加冗余字段、拆分表以及使用非空约束)
|
23天前
|
缓存 关系型数据库 MySQL
MySQL查询优化:提速查询效率的13大秘籍(合理使用索引合并、优化配置参数、使用分区优化性能、避免不必要的排序和group by操作)(下)
MySQL查询优化:提速查询效率的13大秘籍(合理使用索引合并、优化配置参数、使用分区优化性能、避免不必要的排序和group by操作)(下)
|
2天前
|
缓存 关系型数据库 MySQL
MySQL数据库优化技巧:提升性能的关键策略
索引是提高查询效率的关键。根据查询频率和条件,创建合适的索引能够加快查询速度。但要注意,过多的索引可能会增加写操作的开销,因此需要权衡。
|
3天前
|
存储 数据可视化 关系型数据库
MySQL字段的时间类型该如何选择?千万数据下性能提升10%~30%🚀
本文探讨MySQL中时间类型的选择,阐述datetime、timestamp、整形时间戳等类型特点以及它们在千万级数据量下的查询性能
MySQL字段的时间类型该如何选择?千万数据下性能提升10%~30%🚀
|
4天前
|
关系型数据库 MySQL 中间件
【MySQL实战笔记】07 | 行锁功过:怎么减少行锁对性能的影响?-02 死锁和死锁检测
【4月更文挑战第19天】在高并发环境下,死锁发生在多个线程间循环等待资源时,导致无限期等待。MySQL中,死锁可通过`innodb_lock_wait_timeout`参数设置超时或`innodb_deadlock_detect`开启死锁检测来解决。默认的50s超时可能不适用于在线服务,而频繁检测会消耗大量CPU。应对热点行更新引发的性能问题,可以暂时关闭死锁检测(风险是产生大量超时),控制并发度,或通过分散记录减少锁冲突,例如将数据分拆到多行以降低死锁概率。
19 1
|
3月前
|
存储 SQL 关系型数据库
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?
47 1
系统设计场景题—MySQL使用InnoDB,通过二级索引查第K大的数,时间复杂度是多少?