MySQL本身并没有对单表最大记录数进行限制,这个数值取决于你的操作系统对单个文件的限制本身。业界流传是500万行。超过500万行就要考虑分表分库了。
阿里巴巴《Java 开发手册》提出单表行数超过 500 万行或者单表容量超过 2GB,才推荐进行分库分表。
一个简单的 test
通过循环给表中插入数据,记录插入条数,并输出到控制台。
结果:
private static void insertDataDemo() { DButil dButil = new DButil(); myCon = dButil.getConnection(); try { int i = 0; while(1==1) { i++; String sql = "insert into users (user_name,user_password)" + " value ('"+i+"','password')"; sta = myCon.createStatement(); sta.execute(sql); System.out.println(i); } } catch (Exception e) { e.printStackTrace(); }finally { dButil.close(); } }
经过一晚上的运行,早晨发现已经插入了两百多万条数据, 尽管还可以插入数据,但通过控制台台输出发现插入数据的速度相对来说慢了很多,隔2-3秒插入一条,这速度是不能忍受的。
事实上,MySql数据库一张表中能存储的最大数据量和实际记录的条数无关,而与 MySQL 的配置以及机器的硬件有关。因为,MySQL 为了提高性能,会将表的索引装载到内存中。InnoDB buffer size
足够的情况下,其能完成全加载进内存,查询不会有问题。
但是,当单表数据库到达某个量级的上限时,导致内存无法存储其索引,使得之后的 SQL 查询会产生磁盘 IO,从而导致性能下降。当然,这个还有具体的表结构的设计有关,最终导致的问题都是内存限制。