从5个角度优化MySQL数据库层

本文涉及的产品
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 从5个角度优化MySQL数据库层

一、前言

在我们的实际开发应用中,作为数据落地的一层,地位非常重要。

下面笔者从实战角度,分别5个层面,简述数据层的优化思路。

二、分步解析

1. 数据建模

在项目中,产品经理过来的需求之后,就是对需求进行业务分析,把实际的业务需求转化成抽象的存储结构。

这里我们不得不提的是数据库设计的三大范式。

第一范式(1NF):字段不可分;

第二范式(2NF):有主键,非主键字段依赖主键;

第三范式(3NF):非主键字段不能相互依赖。

举个简单的例子,猫舍中有很多只猫,需要做统计和管理。

猫有身高和体重,如果把身高和体重都放在一个字段里,就违背了第一范式,因为是可以分两个字段存储的。

猫的毛发不同,洗护的注意事项也不同,但是洗护的事项和猫是具体哪一只没有直接联系,所以不应该放在一个表中,应该做单独的洗护表。

但是这三大范式在实际项目中,会根据具体查询做一定的冗余,并不需要绝对执行。

2. 优化查询

在确定数据表之后,我们进行具体业务的模块开发。其中涉及到的数据库查询操作,就对应如何优化查询。

见效最快的优化方式是添加合理的索引。

索引按照数据结构来说主要包含B+树和Hash索引。

B+树是左小右大的顺序存储结构,节点只包含id索引列,而叶子节点包含索引列和数据,这种数据和索 引在一起存储的索引方式叫做聚簇索引,一张表只能有一个聚簇索引。假设没有定义主键,InnoDB会选 择一个唯一的非空索引代替,如果没有的话则会隐式定义一个主键作为聚簇索引。

覆盖索引指的是在一次查询中,如果一个索引包含或者说覆盖所有需要查询的字段的值,我们就称之为
覆盖索引,而不再需要回表查询。

而要确定一个查询是否是覆盖索引,我们只需要explain sql语句看Extra的结果是否是“Using index”即可。

注意锁表,比如一次删除操作时,使用的列没有创建索引,导致删除操作扫描全表,这时造成锁表,数据不能写入。

3. 慢SQL查询

慢SQL指的是超出设定值时间的查询,大量的慢SQL会导致拖慢接口返回时间,需要逐个排查。

查看是否开启慢查询。

show variables like "slow_query_log%"

查看慢查询的时间。

show variables like "long_query_time"

4. 分库 分表

分库指的是不同的数据表放到不同的数据库服务器中,分表指的是一张数据表拆成多张数据表,可能位于同一台服务器或多台服

务器中。

分库分表解决的问题,一个是数据库的容量问题,另一个是数据库服务器性能压力问题。

如何做分库分表:

  1. 去除数据表之间的关联,比如连表查询。
  2. 拒绝外键,允许一定的数据冗余设计数据表。
  3. 可以根据业务拆分,减少业务上对数据库的链接。
  4. 可以根据负载拆分,减少对服务器的压力。

5.配置缓存层

MySQL作为数据落地的一层,io压力还是很大的,虽然可以通过增加配置的方式提升性能,但是从成本考虑还是需要我们在架构上优化。

配置缓存层是一个经典的操作,比如Memcached、redis。

如何做缓存层的设计:

  1. 频繁的数据,数据更新操作,先更新缓存层数据,再写入队列,延迟更新到数据库。
  2. 重要的数据,缓存层和数据库同步更新。

三、总结

本文从5个角度简要概述了优化MySQL的要点,每个部分并没有非常详细。

希望抛砖引玉,给各位一些启发。

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
5天前
|
SQL 关系型数据库 MySQL
MySQL慢查询优化、索引优化、以及表等优化详解
本文详细介绍了MySQL优化方案,包括索引优化、SQL慢查询优化和数据库表优化,帮助提升数据库性能。关注【mikechen的互联网架构】,10年+BAT架构经验倾囊相授。
MySQL慢查询优化、索引优化、以及表等优化详解
|
4天前
|
存储 NoSQL 分布式数据库
微服务架构下的数据库设计与优化策略####
本文深入探讨了在微服务架构下,如何进行高效的数据库设计与优化,以确保系统的可扩展性、低延迟与高并发处理能力。不同于传统单一数据库模式,微服务架构要求更细粒度的服务划分,这对数据库设计提出了新的挑战。本文将从数据库分片、复制、事务管理及性能调优等方面阐述最佳实践,旨在为开发者提供一套系统性的解决方案框架。 ####
|
5天前
|
存储 SQL 数据库
深入浅出后端开发之数据库优化实战
【10月更文挑战第35天】在软件开发的世界里,数据库性能直接关系到应用的响应速度和用户体验。本文将带你了解如何通过合理的索引设计、查询优化以及恰当的数据存储策略来提升数据库性能。我们将一起探索这些技巧背后的原理,并通过实际案例感受优化带来的显著效果。
18 4
|
7天前
|
SQL druid 数据库
如何进行数据库连接池的参数优化?
数据库连接池参数优化包括:1) 确定合适的初始连接数,考虑数据库规模和应用需求;2) 调整最大连接数,依据并发量和资源状况;3) 设置最小空闲连接数,平衡资源利用和响应速度;4) 优化连接超时时间,确保系统响应和资源利用合理;5) 配置连接有效性检测,定期检查连接状态;6) 调整空闲连接回收时间,适应访问模式并配合数据库超时设置。
|
9天前
|
缓存 监控 关系型数据库
如何优化MySQL查询速度?
如何优化MySQL查询速度?【10月更文挑战第31天】
32 3
|
15天前
|
SQL Oracle 关系型数据库
Oracle数据库优化方法
【10月更文挑战第25天】Oracle数据库优化方法
24 7
|
11天前
|
SQL 缓存 监控
数据库优化
【10月更文挑战第29天】数据库优化
23 1
|
15天前
|
存储 Oracle 关系型数据库
Oracle数据库优化策略
【10月更文挑战第25天】Oracle数据库优化策略
17 5
|
12天前
|
缓存 关系型数据库 MySQL
如何优化 MySQL 数据库的性能?
【10月更文挑战第28天】
33 1
|
14天前
|
XML Java 数据库连接
如何使用HikariCP连接池来优化数据库连接管理
在Java应用中,高效管理数据库连接是提升性能的关键。本文介绍了如何使用HikariCP连接池来优化数据库连接管理。通过引入依赖、配置参数和获取连接,你可以显著提高系统的响应速度和吞吐量。 示例代码展示了从配置到使用的完整流程,帮助你轻松上手。
51 3