性能测试常见瓶颈分析及调优方法总结

本文涉及的产品
传统型负载均衡 CLB,每月750个小时 15LCU
应用型负载均衡 ALB,每月750个小时 15LCU
容器服务 Serverless 版 ACK Serverless,952元额度 多规格
简介: 性能测试常见瓶颈分析及调优方法总结

01

引言


在软件开发过程中,性能测试是至关重要的一个环节


在完成开发之后,对系统进行性能测试可以帮助发现系统存在的性能问题从而及时进行优化提高系统的响应速度、吞吐量、并发性等指标



性能测试瓶颈分析及调优方案是性能测试的重要步骤之一,下面我们将详细介绍其步骤和方案。


如今谈起http协议,想必IT人都懂,无论基于Web端还是App端应用、游戏开发等领域,应用非常广泛。



如何才能让http协议让不懂计算机的人也能明白它的重要性?


这个案例主要讲解如何通过http协议的细节来判断cookie、session、会话保持等相关知识点。

02

一、内容简介


在此先大概介绍下整个请求链路JMeter→nginx集群→k8s集群(应用服务部署在容器里,2个pod分别在不同的node上)→数据库接口使用的是http协议

03

二、寻找问题的本质根源


果在压测过程中发现所有的请求只打1个pod中,这个pod的资源利用率达到80%以上,而另外一个pod无压力,通过查看应用日志,发现没有任何请求打到这个pod上,判断是负载不均衡带来的问题

04

三、分析定位问题


根据应用的请求链路信息,通常看到这个现象脑海里想到的第一个想法首先是查看k8s的负载均衡策略,这里简单介绍一下,目前kubernetes提供了两种负载分发策略:


①如果不定义,默认使用kube-proxy的策略,比如随机、轮询


②基于客户端地址的会话保持模式,即来自同一个客户端发起的所有请求都会转发到固定的一个Pod上。



通过查看service的yaml配置,发现service没有配任何IPVS的分发策略

细想还会是什么原因影响请求的转发呢?



大胆假设很可能是另外一个pod所在的node设置网络策略比如限速等引起的,这可以通过最简单的方式进行快速验证,即将pod驱逐到其它node上进行验证可惜的是问题并没有解决。


由此证明此问题不是k8s和node引起的



通过前面的链路判断,只能再往前分析前一个组件了,即nginx集群配置负载均衡策略导致。


Nginx常见的负载均衡策略有,随机、轮询、ip_hash、weight等,其中可能会引起负载不均衡的有ip_hash和weight



通常在企业内,测试并没有很高的权限,而且每个组件都会有对应的负责人,想到这只能联系nginx的负责人帮忙查看了,很遗憾获得的回馈是nginx配置是轮询策略,也就是不是nginx配置引起的



再往前思考一步莫非是JMeter了,但是这次压测使用了5台不同的压力机进行发压,即使有1台压力机有问题,也不会引起后端服务负载不均衡。


此时我已无策可施,下面只能考虑应用层相关配置引起的问题,一层层深入分析


从协议的角度来看,常见的有四层负载均衡和七层负载均衡,这次的应用使用的是七层负载均衡



由于缺乏对http协议的深度理解,大脑中只知道接口协议包含哪些内容如请求头、响应头、cookie、session、URL、地址、参数等信息,实在想不出哪里会导致后端负载不均衡。

05

四、寻找问题解决方案


时和开发还有k8s的负责人,大家在一起讨论原因,开发预估是配置session会话保持引起的


次阐述,会话保持是指在负载均衡器上的一种机制,可以识别客户端与服务器之间交互过程的关联性,负载均衡的同时还保证一系列相关联的访问请求都会分配到一台机器上。



再次查看应用层的确开启了session会话保持功能


如果仅开启session保持这个功能并不会引起负载不均衡问题



因为JMeter使用了不同的压力机,后来通过分析可能是JMeter脚本参数化数据问题,结果发现Cookie中将jsessionid给写成唯一值了,这就导致了所有的请求都只会到同一台服务器上。

06

五、解决问题


最后我通过模拟不同的jssessionid解决了此问题。

07

六、结

 

综上所述,通过这次性能测试案例分析与调优。


从中获得了一些心得与感悟,要实施好性能测试,不但需要一定的知识的深度与广度,而且要让性能测试人员站在一定的高度才能快速分析出问题的瓶颈



后需要开发配合一起排查解决问题,才能从根本上提升系统的性能,满足性能测试需求目标。

相关实践学习
通过性能测试PTS对云服务器ECS进行规格选择与性能压测
本文为您介绍如何利用性能测试PTS对云服务器ECS进行规格选择与性能压测。
相关文章
|
24天前
|
测试技术 API 项目管理
API测试方法
【10月更文挑战第18天】API测试方法
41 1
|
1月前
|
缓存 监控 算法
软件测试中的性能瓶颈分析与优化策略
【10月更文挑战第6天】 性能测试是确保软件系统在高负载条件下稳定运行的重要手段。本文将深入探讨性能测试的常见瓶颈,包括硬件资源、网络延迟和代码效率等问题。通过具体案例分析,我们将展示如何识别并解决这些问题,从而提升软件的整体性能。最后,文章还将分享一些实用的性能优化技巧,帮助读者在日常开发和测试中更好地应对性能挑战。
82 3
|
23天前
|
测试技术 UED
软件测试中的“灰盒”方法:一种平衡透明度与效率的策略
在软件开发的复杂世界中,确保产品质量和用户体验至关重要。本文将探讨一种被称为“灰盒测试”的方法,它结合了白盒和黑盒测试的优点,旨在提高测试效率同时保持一定程度的透明度。我们将通过具体案例分析,展示灰盒测试如何在实际工作中发挥作用,并讨论其对现代软件开发流程的影响。
|
14天前
|
Java 测试技术 Maven
Java一分钟之-PowerMock:静态方法与私有方法测试
通过本文的详细介绍,您可以使用PowerMock轻松地测试Java代码中的静态方法和私有方法。PowerMock通过扩展Mockito,提供了强大的功能,帮助开发者在复杂的测试场景中保持高效和准确的单元测试。希望本文对您的Java单元测试有所帮助。
27 2
|
1月前
|
测试技术 Python
自动化测试项目学习笔记(三):Unittest加载测试用例的四种方法
本文介绍了使用Python的unittest框架来加载测试用例的四种方法,包括通过测试用例类、模块、路径和逐条加载测试用例。
60 0
自动化测试项目学习笔记(三):Unittest加载测试用例的四种方法
|
1月前
|
测试技术 Python
自动化测试项目学习笔记(二):学习各种setup、tearDown、断言方法
本文主要介绍了自动化测试中setup、teardown、断言方法的使用,以及unittest框架中setUp、tearDown、setUpClass和tearDownClass的区别和应用。
60 0
自动化测试项目学习笔记(二):学习各种setup、tearDown、断言方法
|
1月前
|
测试技术 UED
软件测试中的探索性测试:一种高效且灵活的测试方法
本文将深入探讨探索性测试的核心概念、优势及其在实际项目中的应用。我们将从探索性测试的基本定义入手,逐步解析其在不同场景下的具体实施方法和最佳实践。通过详细的案例分析和方法对比,帮助读者全面了解这种既高效又灵活的软件测试技术。
|
1月前
|
缓存 监控 测试技术
软件测试中的性能瓶颈分析与优化策略
本文深入探讨了在软件测试过程中,如何有效地识别和解决性能瓶颈问题。通过对性能瓶颈的定义、分类以及常见原因的分析,结合实际案例,提出了一系列针对性的优化策略和方法。这些策略旨在帮助测试人员和开发人员提高软件的性能表现,确保软件在高负载条件下依然能够稳定运行。
|
1月前
|
安全 测试技术 API
一图看懂API测试9种方法
一图看懂API测试九种方法:冒烟测试验证基本功能,功能测试确保符合规格,集成测试检查组件协同工作,回归测试防止新变更引入问题,负载测试评估性能稳定性,压力测试挑战极限负载,安全测试发现并修复漏洞,用户界面测试确保UI与API协调,模糊测试提升异常数据处理鲁棒性。
|
1月前
|
弹性计算 安全 Linux
阿里云国际版使用ping命令测试ECS云服务器不通的排查方法
阿里云国际版使用ping命令测试ECS云服务器不通的排查方法