怎么找出消耗 CPU 的罪魁祸首?!

简介: 谁在消耗cpu?用户+系统+IO等待+软硬中断+空闲

谁在消耗cpu?

用户+系统+IO等待+软硬中断+空闲


image.png

image.png




# 祸首是谁?

用户

用户空间CPU消耗,各种逻辑运算


正在进行大量tps 函数/排序/类型转化/逻辑IO访问…


IO等待

等待IO请求的完成


此时CPU实际上空闲 如vmstat中的wa 很高。但IO等待增加,wa也不一定会上升(请求I/O后等待响应,但进程从核上移开了)


image.png

image.png




产生影响

用户和IO等待消耗了大部分cpu


吞吐量下降(tps)


查询响应时间增加


慢查询数增加


对mysql的并发陡增,也会产生上述影响


image.png


# 如何减少CPU消耗?

减少等待

减少IO量


SQL/index,使用合适的索引减少扫描的行数(需平衡索引的正收益和维护开销,空间换时间)


提升IO处理能力


加cache/加磁盘/SSD


image.png


减少计算

减少逻辑运算量


避免使用函数,将运算转移至易扩展的应用服务器中 如substr等字符运算,dateadd/datesub等日期运算,abs等数学函数


减少排序,利用索引取得有序数据或避免不必要排序 如union all代替 union,order by 索引字段等


禁止类型转换,使用合适类型并保证传入参数类型与数据库字段类型绝对一致,如数字用tiny/int/bigint等,必需转换的在传入数据库之前在应用中转好


简单类型,尽量避免复杂类型,降低由于复杂类型带来的附加运算。更小的数据类型占用更少的磁盘、内存、cpu缓存和cpu周期


….


减少逻辑IO量


index,优化索引,减少不必要的表扫描 如增加索引,调整组合索引字段顺序,去除选择性很差的索引字段等等


table,合理拆分,适度冗余 如将很少使用的大字段拆分到独立表,非常频繁的小字段冗余到“引用表”


SQL,调整SQL写法,充分利用现有索引,避免不必要的扫描,排序及其他操作 如减少复杂join,减少order by,尽量union all,避免子查询等


数据类型,够用就好,减少不必要使用大字段 如tinyint够用就别总是int,int够用也别老bigint,date够用也别总是timestamp


….


image.png


减少query请求量(非数据库本身)


适当缓存,降低缓存数据粒度,对静态并被频繁请求的数据进行适当的缓存 如用户信息,商品信息等


优化实现,尽量去除不必要的重复请求 如禁止同一页面多次重复请求相同数据的问题,通过跨页面参数传递减少访问等


合理需求,评估需求产出比,对产出比极端底下的需求合理去除


….


image.png


升级cpu

若经过减少计算和减少等待后还不能满足需求,cpu利用率还高T_T


是时候拿出最后的杀手锏了,升级cpu,是选择更快的cpu还是更多的cpu了?


参考


《高性能MySQL》


《图解性能优化》


大部分整理自《MySQL Tuning For CPU Bottleneck》


相关文章
|
Docker 容器
CPU内存不足分析Gitlab的内存消耗
CPU内存不足分析Gitlab的内存消耗
CPU内存不足分析Gitlab的内存消耗
|
6月前
|
存储 Kubernetes Perl
【CKA模拟题】查询消耗CPU最多的Pod
【CKA模拟题】查询消耗CPU最多的Pod
49 0
【CKA模拟题】查询消耗CPU最多的Pod
|
缓存 Java 大数据
深入解析JVM调优:解决OutOfMemoryError、内存泄露、线程死锁、锁争用和高CPU消耗问题
深入解析JVM调优:解决OutOfMemoryError、内存泄露、线程死锁、锁争用和高CPU消耗问题
219 0
|
移动开发 Java
Java进程如何定位消耗CPU的代码
Java进程如何定位消耗CPU的代码
295 0
|
Java 调度
JVM调优之Java进程消耗CPU过高
JVM调优之Java进程消耗CPU过高
263 0
|
8天前
|
弹性计算 Kubernetes Perl
k8s 设置pod 的cpu 和内存
在 Kubernetes (k8s) 中,设置 Pod 的 CPU 和内存资源限制和请求是非常重要的,因为这有助于确保集群资源的合理分配和有效利用。你可以通过定义 Pod 的 `resources` 字段来设置这些限制。 以下是一个示例 YAML 文件,展示了如何为一个 Pod 设置 CPU 和内存资源请求(requests)和限制(limits): ```yaml apiVersion: v1 kind: Pod metadata: name: example-pod spec: containers: - name: example-container image:
|
17天前
|
存储 关系型数据库 MySQL
查询服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息
查询服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息
191 2
|
2月前
|
存储 关系型数据库 MySQL
查询服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息
查询服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息
128 5
|
1月前
|
C# 开发工具 Windows
C# 获取Windows系统信息以及CPU、内存和磁盘使用情况
C# 获取Windows系统信息以及CPU、内存和磁盘使用情况
41 0