如何分析并设计性能测试场景

简介: 以上就是关于性能需求分析以及场景设计的内容,文中举的例子仅供参考,在实际的工作中,需要学会灵活变通。

640.png


前几天写了一篇文章《如何设计自动化测试case,里面聊到了为什么要设计case:


  1. 便于业务活动开展
  2. 确保业务场景覆盖
  3. 质量度量和质量内建


其实这几点原因,在性能测试活动中同样适用。


这篇文章,我想聊聊基于性能测试需求分析的压测场景设计的话题。


如何理解性能测试场景?


性能测试场景,其实和功能测试没什么区别,只是侧重点不同。


我们在功能测试中经常用到的等价类边界值等分析和设计测试case的方法,目的是为了尽可能的覆盖业务场景,避免遗漏导致的功能逻辑缺失或者未达到预期。


而在性能测试中,基于性能需求分析和设计性能测试场景,侧重的是基于业务场景的请求/流量配比,以及测试数据准备。这实际上就是我在前面的文章《全链路压测(8):构建三大模型》中提到的性能测试三大模型:


  1. 业务场景模型
  2. 请求流量模型
  3. 测试数据模型


如何设计性能测试场景?


假设现在我们要开展一次性能测试,需求背景及描述如下:


需求背景:互联网电商平台;

需求描述:验证订单相关的业务及订单服务的性能;

预期目标:订单服务可以支撑日常线上业务稳定运行;

预期指标:服务级别TPS>200,P0接口99RT<100ms,线上应用CPU%<=40%;


这个时候,如何进行需求分析和测试场景设计呢?


需求分析


1.要验证订单服务的性能;

a.需要混合场景验证;

b.要考虑请求流量配比;

2.P0接口的99RT<100ms;

a.需要梳理订单服务P0接口;

b.检查相关监控工具是否接入;


场景设计


假设订单服务有4个P0接口;

分别是创建订单/确认订单/订单列表/订单详情;

各自请求流量占比分别是35%/30%/20%/15%(这里忽略其他占比较小的接口,实际工作中要考虑真实占比);


那么压测场景设计如下:


编号

场景名称

场景类型

压测方式

压测目的

备注说明

1

创建订单

单机单接口

梯度递增

寻找性能拐点,发现性能瓶颈

可能需要多次压测验证


2

确认订单

单机单接口

梯度递增

寻找性能拐点,发现性能瓶颈

3

订单列表

单机单接口

梯度递增

寻找性能拐点,发现性能瓶颈

4

订单详情

单机单接口

梯度递增

寻找性能拐点,发现性能瓶颈

5

混合场景

单机服务级

(流量配比)

梯度递增

寻找性能拐点,发现性能瓶颈

6

稳定并发压测

验证预期范围内的性能是否达标

多次调整并发,直至性能达标

7

稳定性测试(>12h)

验证服务长时间运行的稳定性

以最后一次稳定并发压测数值压测


如上所示,大概需要设计七个场景,分别验证接口级别和服务级别的性能。


问题:为什么不直接压测混合场景?


答案:因为一个服务有多个接口,每个接口都可能存在影响性能的因素,通过单接口压测,快速排查解决存在性能问题的因素,这样可以减少直接混合场景压测的性能问题定位分析和优化验证难度。


数据准备


数据准备取决于被测的业务场景,以上面的需求为例,准备测试数据时要注意两方面:


业务逻辑


  1. 订单商品库存是否充足;
  2. 下单用户是否有可用优惠券;
  3. 下单用户优惠券是否可叠加;
  4. 订单商品是否参与营销活动;
  5. 下单用户是否需要登录状态检查;
  6. 订单商品优惠券与营销活动是否可叠加;


数据量级


  1. 下单用户数量级;
  2. 用户登录态token有效期;
  3. 商品库存数量是否足够多次使用;
  4. 用户优惠券是否足够(需考虑优惠券核销和恢复);
  5. 营销活动创建以及优惠券&商品和营销活动的关联配置;


完成上述步骤,接下来才是后续的动作。后续的压测准备事项大概包括如下几项:


  1. 环境检查;
  2. DDL同步;
  3. 被测服务分支发布;
  4. 脚本开发及联调通过;


以上就是关于性能需求分析以及场景设计的内容,文中举的例子仅供参考,在实际的工作中,需要学会灵活变通。


当然,经验比较丰富的同学场景设计其实可做可不做,流程只是提供一种工程实践的指导思路,并不需要完全照搬。

相关文章
|
9月前
|
边缘计算 安全 5G
高精度时钟同步测试仪:构建全场景时间同步生态
在数字化转型中,时间同步至关重要。西安同步电子科技的 SYN5106 高精度时钟测试仪,具备±20ns 时差测量精度与 GPS/北斗双模授时能力,广泛应用于电力、通信、金融和科研领域。它解决变电站时间偏差、5G 基站同步误差及高频交易延迟等问题,助力智能电网、5G 网络和科研实验。产品便携可靠,支持多协议,满足国家安全要求,为各行业提供精准时间同步解决方案。未来将探索量子通信与深空探测等领域,持续推动技术创新。
|
5月前
|
人工智能 边缘计算 搜索推荐
AI产品测试学习路径全解析:从业务场景到代码实践
本文深入解析AI测试的核心技能与学习路径,涵盖业务理解、模型指标计算与性能测试三大阶段,助力掌握分类、推荐系统、计算机视觉等多场景测试方法,提升AI产品质量保障能力。
|
缓存 监控 算法
软件测试中的性能瓶颈分析与优化策略
【10月更文挑战第6天】 性能测试是确保软件系统在高负载条件下稳定运行的重要手段。本文将深入探讨性能测试的常见瓶颈,包括硬件资源、网络延迟和代码效率等问题。通过具体案例分析,我们将展示如何识别并解决这些问题,从而提升软件的整体性能。最后,文章还将分享一些实用的性能优化技巧,帮助读者在日常开发和测试中更好地应对性能挑战。
721 3
|
监控 测试技术 持续交付
软件测试中的性能瓶颈分析与优化策略
性能瓶颈,如同潜伏于软件深处的隐形障碍,悄然阻碍着系统的流畅运行。本文旨在揭示这些瓶颈的形成机理,剖析其背后的复杂成因,并汇聚一系列针对性的优化策略,为软件开发者提供一套系统性的解决方案。
315 6
|
9月前
|
编解码 5G 定位技术
时间频率综合测试仪优势所在及场景使用介绍
时间频率综合测试仪是保障系统精准运行的关键设备。以西安同步电子科技有限公司的SYN5104型为例,它集时间标准源、时差测量和频率测试于一体,功能涵盖时间准确度、频率分析、PPS/B码/E1/PTP/NTP测试等,精度达30ns。其便携设计适用于研发、标定、现场检测,支持电力系统校准、通信同步测试及科研校准等场景,助力高精度时频同步与产品质量提升。文章版权归西安同步电子科技有限公司所有,严禁侵权。
|
机器学习/深度学习 人工智能 自然语言处理
MarS:微软开源金融市场模拟预测引擎,支持策略测试、风险管理和市场分析
MarS 是微软亚洲研究院推出的金融市场模拟预测引擎,基于生成型基础模型 LMM,支持无风险环境下的交易策略测试、风险管理和市场分析。
530 8
MarS:微软开源金融市场模拟预测引擎,支持策略测试、风险管理和市场分析
|
开发框架 .NET Java
C#集合数据去重的5种方式及其性能对比测试分析
C#集合数据去重的5种方式及其性能对比测试分析
228 11
|
开发框架 .NET Java
C#集合数据去重的5种方式及其性能对比测试分析
C#集合数据去重的5种方式及其性能对比测试分析
244 10
|
监控 算法 Java
jvm-48-java 变更导致压测应用性能下降,如何分析定位原因?
【11月更文挑战第17天】当JVM相关变更导致压测应用性能下降时,可通过检查变更内容(如JVM参数、Java版本、代码变更)、收集性能监控数据(使用JVM监控工具、应用性能监控工具、系统资源监控)、分析垃圾回收情况(GC日志分析、内存泄漏检查)、分析线程和锁(线程状态分析、锁竞争分析)及分析代码执行路径(使用代码性能分析工具、代码审查)等步骤来定位和解决问题。
305 6
|
JavaScript 安全 编译器
TypeScript 与 Jest 测试框架的结合使用,从 TypeScript 的测试需求出发,介绍了 Jest 的特点及其与 TypeScript 结合的优势,详细讲解了基本测试步骤、常见测试场景及异步操作测试方法
本文深入探讨了 TypeScript 与 Jest 测试框架的结合使用,从 TypeScript 的测试需求出发,介绍了 Jest 的特点及其与 TypeScript 结合的优势,详细讲解了基本测试步骤、常见测试场景及异步操作测试方法,并通过实际案例展示了其在项目中的应用效果,旨在提升代码质量和开发效率。
335 6

热门文章

最新文章