记录一次私有化云上Mysql数据库CPU跑到100%的问题处理

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
RDS MySQL Serverless 高可用系列,价值2615元额度,1个月
简介: 记录一次私有化云上Mysql数据库CPU跑到100%的问题处理

项目背景是这样的,我们给客户做一个业务系统,部署在客户现场的私有云服务器上,使用的数据库是私有云上的Mysql,由于项目涉及到的系统很多,所以私有云上的资源是有限的,不像公有云上的资源那么充足并且动态扩展。

系统运行初期,用户量不大,系统很稳定,这里的稳定是指响应很快,资源使用率也不高。由于系统被培训和宣讲,系统使用人数突然增加了很多,突然系统就响应很慢,导致新增的用户登录不进去,查看的服务日志发现应用服务器的日志里很多请求都在等待,积累了大量的等待线程。然后排查系统的业务日志发现里面很多获取不到数据库连接的错误,但是通过客户端工具可以连接到数据库上。项目人员通过日志监测发现Mysql的系统指标中CPU跑满到了100%,为了尽快恢复服务,云上先将Mysql的CPU核数扩大一倍,应用服务也重启一下,临时恢复了一段时间。查询Mysql的执行计划日志,发现很多慢SQL。分析了几个SQL发现是由于SQL语句太长而且嵌套了很多子查询。当时傻傻的问了一个问题:为什么系统里的SQL在Oracle上跑没问题,改造成Mysql的SQL在Mysql上跑会出问题?你们不是云吗?资源怎么会跑满?现在想想自己太年轻了。这就涉及到数据库执行引擎性能问题了。听了数据库专家的指点,瞬间醍醐灌顶,虽然还不甚了解,大概意思是:

一、SQL语句执行需要CPU计算和内存资源,当时的环境就是资源不是很充足

二、SQL语句在执行是Mysql需要做解析,语句太复杂解析会慢,导致执行也变慢

三、SQL里的语句包含太多的子查询和关联查询,Mysql优化的时候也会很慢,而且优化要消耗资源,又是一个开销

四、索引问题导致的,这个是查询没建好索引导致执行变慢

五、数据量问题,关联查询数据量多的话执行也会变慢,这块不是重点,因为数据量不大

六、频繁访问Mysql,Mysql的连接处理性能,针对这点后来改成缓存了,尤其是访问量比较多的语句

综上所述,不要太频繁的访问数据库,让SQL语句尽量简单,建好索引,数据量上面让dba保持关注,可以提前建好分表。最后还被活生生的鄙视了一下,不要以为ORACLE上跑的没问题的语句,改一下MYSQL版本满足需求但是不做SQL优化就没问题,不要问问什么,总之是自己写的语句的问题。

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
6天前
|
弹性计算 人工智能 Serverless
阿里云ACK One:注册集群云上节点池(CPU/GPU)自动弹性伸缩,助力企业业务高效扩展
在当今数字化时代,企业业务的快速增长对IT基础设施提出了更高要求。然而,传统IDC数据中心却在业务存在扩容慢、缩容难等问题。为此,阿里云推出ACK One注册集群架构,通过云上节点池(CPU/GPU)自动弹性伸缩等特性,为企业带来全新突破。
|
6月前
|
缓存 关系型数据库 分布式数据库
PolarDB常见问题之数据库cpu突然飙高如何解决
PolarDB是阿里云推出的下一代关系型数据库,具有高性能、高可用性和弹性伸缩能力,适用于大规模数据处理场景。本汇总囊括了PolarDB使用中用户可能遭遇的一系列常见问题及解答,旨在为数据库管理员和开发者提供全面的问题指导,确保数据库平稳运行和优化使用体验。
|
Oracle 关系型数据库 Linux
解决在linux服务器上部署定时自动查找cpu,内存,磁盘使用量,并将查询结果写入数据库的脚本,只能手动运行实现插库操作
问题描述:将脚本名命名为mortior.sh(以下简称mo),手动执行脚本后查询数据库,表中有相应的信息,放入自动执行队列中,脚本被执行,但是查询数据库,并没有新增数据。
80 0
|
3月前
|
SQL 监控 关系型数据库
MySQL优化: CPU高 处理脚本 pt-kill脚本
MySQL优化: CPU高 处理脚本 pt-kill脚本
|
3月前
|
缓存 NoSQL 数据库
救命!DBA找上门了,数据库cpu飙到60%
这篇文章讲述了作者如何通过优化数据库查询和引入二级缓存架构,成功解决了数据库CPU使用率规律性飙升的问题,提高了系统稳定性。
救命!DBA找上门了,数据库cpu飙到60%
|
4月前
|
存储 自然语言处理 DataWorks
通过云上数据库三步构建RAG系统
本文介绍了如何使用OpenSearch LLM智能问答版通过云上数据库一站式构建RAG系统。
20116 10
|
5月前
|
弹性计算 安全 数据库
云上攻防-云服务篇&弹性计算&云数据库&实例元数据&控制角色&AK控制台接管
云上攻防-云服务篇&弹性计算&云数据库&实例元数据&控制角色&AK控制台接管
|
6月前
|
存储 缓存 关系型数据库
【如何选择Mysql服务器的CPU核数及内存大小】
【如何选择Mysql服务器的CPU核数及内存大小】
455 0
|
5月前
|
SQL 关系型数据库 分布式数据库
PolarDB产品使用问题之在一个集群上创建多个数据库实例,是否可以做cpu和内存的配额指定
PolarDB产品使用合集涵盖了从创建与管理、数据管理、性能优化与诊断、安全与合规到生态与集成、运维与支持等全方位的功能和服务,旨在帮助企业轻松构建高可用、高性能且易于管理的数据库环境,满足不同业务场景的需求。用户可以通过阿里云控制台、API、SDK等方式便捷地使用这些功能,实现数据库的高效运维与持续优化。
|
存储 弹性计算 NoSQL
悦数图数据库 x 阿里云计算巢:打造云上超大规模图数据库
近年来,图数据库的概念被越来越多的企业反复提及。图(Graph)是一种存储实体,及实体之间关系的数据结构,而图数据库(Graph Database)则是一个使用图数据进行存储,同时使用图结构进行语义查询的数据库。