性能测试常见瓶颈分析及调优方法总结

本文涉及的产品
应用型负载均衡 ALB,每月750个小时 15LCU
传统型负载均衡 CLB,每月750个小时 15LCU
性能测试 PTS,5000VUM额度
简介: 性能测试常见瓶颈分析及调优方法总结

01

引言


在软件开发过程中,性能测试是至关重要的一个环节


在完成开发之后,对系统进行性能测试可以帮助发现系统存在的性能问题从而及时进行优化提高系统的响应速度、吞吐量、并发性等指标



性能测试瓶颈分析及调优方案是性能测试的重要步骤之一,下面我们将详细介绍其步骤和方案。


如今谈起http协议,想必IT人都懂,无论基于Web端还是App端应用、游戏开发等领域,应用非常广泛。



如何才能让http协议让不懂计算机的人也能明白它的重要性?


这个案例主要讲解如何通过http协议的细节来判断cookie、session、会话保持等相关知识点。

02

一、内容简介


在此先大概介绍下整个请求链路JMeter→nginx集群→k8s集群(应用服务部署在容器里,2个pod分别在不同的node上)→数据库接口使用的是http协议

03

二、寻找问题的本质根源


果在压测过程中发现所有的请求只打1个pod中,这个pod的资源利用率达到80%以上,而另外一个pod无压力,通过查看应用日志,发现没有任何请求打到这个pod上,判断是负载不均衡带来的问题

04

三、分析定位问题


根据应用的请求链路信息,通常看到这个现象脑海里想到的第一个想法首先是查看k8s的负载均衡策略,这里简单介绍一下,目前kubernetes提供了两种负载分发策略:


①如果不定义,默认使用kube-proxy的策略,比如随机、轮询


②基于客户端地址的会话保持模式,即来自同一个客户端发起的所有请求都会转发到固定的一个Pod上。



通过查看service的yaml配置,发现service没有配任何IPVS的分发策略

细想还会是什么原因影响请求的转发呢?



大胆假设很可能是另外一个pod所在的node设置网络策略比如限速等引起的,这可以通过最简单的方式进行快速验证,即将pod驱逐到其它node上进行验证可惜的是问题并没有解决。


由此证明此问题不是k8s和node引起的



通过前面的链路判断,只能再往前分析前一个组件了,即nginx集群配置负载均衡策略导致。


Nginx常见的负载均衡策略有,随机、轮询、ip_hash、weight等,其中可能会引起负载不均衡的有ip_hash和weight



通常在企业内,测试并没有很高的权限,而且每个组件都会有对应的负责人,想到这只能联系nginx的负责人帮忙查看了,很遗憾获得的回馈是nginx配置是轮询策略,也就是不是nginx配置引起的



再往前思考一步莫非是JMeter了,但是这次压测使用了5台不同的压力机进行发压,即使有1台压力机有问题,也不会引起后端服务负载不均衡。


此时我已无策可施,下面只能考虑应用层相关配置引起的问题,一层层深入分析


从协议的角度来看,常见的有四层负载均衡和七层负载均衡,这次的应用使用的是七层负载均衡



由于缺乏对http协议的深度理解,大脑中只知道接口协议包含哪些内容如请求头、响应头、cookie、session、URL、地址、参数等信息,实在想不出哪里会导致后端负载不均衡。

05

四、寻找问题解决方案


时和开发还有k8s的负责人,大家在一起讨论原因,开发预估是配置session会话保持引起的


次阐述,会话保持是指在负载均衡器上的一种机制,可以识别客户端与服务器之间交互过程的关联性,负载均衡的同时还保证一系列相关联的访问请求都会分配到一台机器上。



再次查看应用层的确开启了session会话保持功能


如果仅开启session保持这个功能并不会引起负载不均衡问题



因为JMeter使用了不同的压力机,后来通过分析可能是JMeter脚本参数化数据问题,结果发现Cookie中将jsessionid给写成唯一值了,这就导致了所有的请求都只会到同一台服务器上。

06

五、解决问题


最后我通过模拟不同的jssessionid解决了此问题。

07

六、结

 

综上所述,通过这次性能测试案例分析与调优。


从中获得了一些心得与感悟,要实施好性能测试,不但需要一定的知识的深度与广度,而且要让性能测试人员站在一定的高度才能快速分析出问题的瓶颈



后需要开发配合一起排查解决问题,才能从根本上提升系统的性能,满足性能测试需求目标。

相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
相关文章
|
22天前
|
数据采集 监控 机器人
浅谈网页端IM技术及相关测试方法实践(包括WebSocket性能测试)
最开始转转的客服系统体系如IM、工单以及机器人等都是使用第三方的产品。但第三方产品对于转转的业务,以及客服的效率等都产生了诸多限制,所以我们决定自研替换第三方系统。下面主要分享一下网页端IM技术及相关测试方法,我们先从了解IM系统和WebSocket开始。
40 4
|
2月前
|
测试技术 API 项目管理
API测试方法
【10月更文挑战第18天】API测试方法
63 1
|
2月前
|
测试技术 UED
软件测试中的“灰盒”方法:一种平衡透明度与效率的策略
在软件开发的复杂世界中,确保产品质量和用户体验至关重要。本文将探讨一种被称为“灰盒测试”的方法,它结合了白盒和黑盒测试的优点,旨在提高测试效率同时保持一定程度的透明度。我们将通过具体案例分析,展示灰盒测试如何在实际工作中发挥作用,并讨论其对现代软件开发流程的影响。
|
27天前
|
监控 算法 Java
jvm-48-java 变更导致压测应用性能下降,如何分析定位原因?
【11月更文挑战第17天】当JVM相关变更导致压测应用性能下降时,可通过检查变更内容(如JVM参数、Java版本、代码变更)、收集性能监控数据(使用JVM监控工具、应用性能监控工具、系统资源监控)、分析垃圾回收情况(GC日志分析、内存泄漏检查)、分析线程和锁(线程状态分析、锁竞争分析)及分析代码执行路径(使用代码性能分析工具、代码审查)等步骤来定位和解决问题。
|
1月前
|
机器学习/深度学习 算法 UED
在数据驱动时代,A/B 测试成为评估机器学习项目不同方案效果的重要方法
在数据驱动时代,A/B 测试成为评估机器学习项目不同方案效果的重要方法。本文介绍 A/B 测试的基本概念、步骤及其在模型评估、算法改进、特征选择和用户体验优化中的应用,同时提供 Python 实现示例,强调其在确保项目性能和用户体验方面的关键作用。
36 6
|
27天前
|
并行计算 算法 测试技术
C语言因高效灵活被广泛应用于软件开发。本文探讨了优化C语言程序性能的策略,涵盖算法优化、代码结构优化、内存管理优化、编译器优化、数据结构优化、并行计算优化及性能测试与分析七个方面
C语言因高效灵活被广泛应用于软件开发。本文探讨了优化C语言程序性能的策略,涵盖算法优化、代码结构优化、内存管理优化、编译器优化、数据结构优化、并行计算优化及性能测试与分析七个方面,旨在通过综合策略提升程序性能,满足实际需求。
61 1
|
1月前
|
JavaScript 安全 编译器
TypeScript 与 Jest 测试框架的结合使用,从 TypeScript 的测试需求出发,介绍了 Jest 的特点及其与 TypeScript 结合的优势,详细讲解了基本测试步骤、常见测试场景及异步操作测试方法
本文深入探讨了 TypeScript 与 Jest 测试框架的结合使用,从 TypeScript 的测试需求出发,介绍了 Jest 的特点及其与 TypeScript 结合的优势,详细讲解了基本测试步骤、常见测试场景及异步操作测试方法,并通过实际案例展示了其在项目中的应用效果,旨在提升代码质量和开发效率。
43 6
|
1月前
|
Java 测试技术 Maven
Java一分钟之-PowerMock:静态方法与私有方法测试
通过本文的详细介绍,您可以使用PowerMock轻松地测试Java代码中的静态方法和私有方法。PowerMock通过扩展Mockito,提供了强大的功能,帮助开发者在复杂的测试场景中保持高效和准确的单元测试。希望本文对您的Java单元测试有所帮助。
227 2
|
2月前
|
测试技术 Python
自动化测试项目学习笔记(三):Unittest加载测试用例的四种方法
本文介绍了使用Python的unittest框架来加载测试用例的四种方法,包括通过测试用例类、模块、路径和逐条加载测试用例。
100 0
自动化测试项目学习笔记(三):Unittest加载测试用例的四种方法
|
9天前
|
监控 JavaScript 测试技术
postman接口测试工具详解
Postman是一个功能强大且易于使用的API测试工具。通过详细的介绍和实际示例,本文展示了Postman在API测试中的各种应用。无论是简单的请求发送,还是复杂的自动化测试和持续集成,Postman都提供了丰富的功能来满足用户的需求。希望本文能帮助您更好地理解和使用Postman,提高API测试的效率和质量。
51 11