MySQL分区表-电商数据库设计及优化学习笔记

一、背景

这里是我的电商数据库设计及优化学习笔记中关于MySQL分区表部分的内容。

二、MySQL分区表

1、使用分区表需要注意的： 
*确认MySQL服务器是否支持分区表 
使用mysql>show plugins来查看 
分区表的特点： 
*在逻辑上为一个表，在物理上存储在多个文件中 
2、常用的分区表的类型： 
2.1 哈希类型的分区： 
主要特点： 
根据MOD（分区键，分区数）的值把数据行存储到表的不同分区中，这样的分区称为哈希分区。 
hash分区的键值必须是一个INT类型的数据，或者通过函数可以转为INT类型 
如何建立哈希分区： 
在建表语句最末尾加上 PARTITION BY HASH(分区键) PARITION 分区数 
如 
PARTITION BY HASH(customer_id) PARITION 4； 
分区表和非分区表的差异主要还是在物理文件上： 
分区表会包含一个以frm结尾的源数据文件，还有按照分区的id建立的数据文件 
分区表的使用跟普通表是一样的 
2.2按范围分区 
特点： 
根据分区键值的范围把数据行存储到表的不同分区中 
多个分区的范围要连续，但是不能重叠 
默认情况下使用VALUES LESS THAN属性，即每个分区不包括指定的那个值。 
建立RANGE分区： 
在建表语句最末尾加上 PARTITION BY RANGE(customer_id) ( 
PARTITION p0 VALUES LESS THAN(10000), 
PARTITION p1 VALUES LESS THAN(20000), 
… 
PARTITION pn VALUES LESS THAN MAXVALUES, 
); 
这里表示，分区键，也就是customer_id范围在0-9999的用户存储在p0分区，10000-19999的用户在p1分区，在范围分区中最好包括一个VALUES LESS THAN MAXVALUES的分区。 
范围分区适用场景： 
分区键为日期或是时间类型 
所有查询中都包括分区键 
定期按照范围清理历史数据 
2.3 LIST分区 
特点： 
按分区键取值的列表进行分区 
同范围分区一样，个分区列表不能重复 
每一行数据必须能找到对应的分区列表，否则数据插入会失败 
建立LIST分区 
在语法上和哈希、范围分区的区别： 
PARTITION BY LIST(login_type)( 
PARTITION p0 VALUES IN(1,3,5,7,9), 
PARTITION p0 VALUES IN(2，4，6，8) 
）；

3.为登录日志表分区 
3.1业务场景分析： 
记录用户每次登录的日志，用户每次登录都会记录customer_login_log日志 
用户登录日志保存一年，一年后可以删除 
3.2表的分区类型及分区键 
根据业务场景分析，这里适合使用范围分区，选择分区键要尽量避免产生跨分区查询，在登录日志表中，只有login_time是日期类型的，而且之后需要根据日期删除，所以选择login_time作为分区键 
3.3分区用户登录日志表 
CREATE TABLE customer_login_log( 
customer_id INT UNSIGNED NOT NULL, 
login_time DATETIME NOT NULL, 
login_ip INT UNSIGNED NOT NULL, 
login_type TINYINT NOT NULL 
)ENGINE =INNODB 
PARTITION BY RANGE(YEAR(login_time))( 
PARTITION p0 VALUES LESS THAN(2017), 
PARTITION p1 VALUES LESS THAN(2018), 
PARTITION p2 VALUES LESS THAN(2019) 
); 
往表中添加几条数据 
INSERT INTO customer_login_log(customer_id,login_time,login_ip,login_type)VALUES(1001,’2017-01-25’,0,1),(1001,’2017-07-25’,0,1),(1001,’2018-01-25’,0,1),(1001,’2018-03-25’,0,1),(1001,’2016-01-25’,0,1); 
通过MYSQL系统日志查询查看分区情况，语句如下： 
SELECT table_name,partition_name,partition_description,table_rows 
FROM information_schema.PARTITIONS 
WHERE table_name=’customer_login_log’

在这个表中没有建立MAXVIEW分区是为了维护方便，为了避免插入数据到RANGE分区失败，要做修改并添加分区的计划任务。

增加分区的语句 
ALTER TABLE customer_login_log ADD PARTITION (PARTITION p4 VALUES LESS THAN(2020)); 
删除分区 
ALTER TABLE customer_login_log DROP PARTITION P0; 
归档过期数据 
除了删除数据，还有可能需要对过期数据进行归档 
分区数据归档迁移条件： 
1、MYSQL>=5.7 
2、结构相同 
3、归档到的数据表一定要是非分区表 
4、非临时表，不能有外键约束 
5、归档引擎要是：archive 
步骤1、先建立一个非分区表 
CREATE TABLE customer_login_log( 
customer_id INT UNSIGNED NOT NULL, 
login_time DATETIME NOT NULL, 
login_ip INT UNSIGNED NOT NULL, 
login_type TINYINT NOT NULL 
)ENGINE =INNODB 
步骤2、数据交换 
ALTER TABLE customer_login_log exchange PARTITION P1 WITH TABLE arch_customer_login_log; 
将分区p1，也就是2017年以前的数据交换到归档表中， 
此时日志表中p1分区中已经没有数据，但是分区还存在，p1分区中的数据已经存在刚刚建的归档表中，但是之后再往日志表中插入2017年以前的数据还是会存到p1分区表中，所以此时要对p1分区进行删除。 
语句： ALTER TABLE customer_login_log DROP PARTITION P1; 
步骤3、如果有需要，可以把日志表存储引擎改为归档引擎： 
ALTER TABLE arch_customer_login_log ENGINE=archive 
归档引擎比innodb占用的内存更小，但是归档引擎的表只能进行查询操作，而不能进行写操作。

使用分区表的注意事项 
结合业务场景选择分区键，避免跨分区查询 
对分区表进行查询最好在where从句中包含分区键 
具有主键或者唯一索引的表，主键或唯一索引必须是分区键的一部分 
（所以在用户登录表中把自增id主键去掉了，不然会影响分区）

三、小结

学习了常用的分区类型：哈希分区，范围分区，LIST分区。还有增加分区、删除分区的方法。 
表分区的优点： 
1、改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，提高检索速度。 
2、增强可用性：如果表的某个分区出现故障，表在其他分区的数据仍然可用； 
3、维护方便：如果表的某个分区出现故障，需要修复数据，只修复该分区即可； 
4、均衡I/O：可以把不同的分区映射到磁盘以平衡I/O，改善整个系统性能。 
但是也有缺点： 
分区表相关：已经存在的表没有方法可以直接转化为分区表。不过 Oracle 提供了在线重定义表的功能。

使用分区要注意 
结合业务场景选择分区键，避免跨分区查询 
对分区表进行查询最好在where从句中包含分区键 
具有主键或者唯一索引的表，主键或唯一索引必须是分区键的一部分 
（所以在用户登录表中把自增id主键去掉了，不然会影响分区）

原文地址https://blog.csdn.net/qq_40916110/article/details/80782191