测试中的误报和漏报同样的值得反复修正

简介: 测试中的误报和漏报同样的值得反复修正

制品过程中,测试用例执行失败,那么不一定是发现了问题也有可能是外部因素导致的,这就是缺陷误报;在上线后,用户触发了遗漏缺陷,会引起一系列连锁反应,甚至导致资损,这些遗漏的缺陷是因为漏报导致的。

那么无论是误报,还是漏报都会导致制品团队的返工,也是最大的浪费。

误报的返工


测试过程中我们常常会遇见引起测试用例失效的原因不是被测系统的BUG导致的,而是由于一些测试环境、测试数据、外部依赖等原因导致的,虽然这些并不能定义为BUG,但是同样引起了测试工作的返工因此也需要解决误报。


误报是内部制品过程的浪费。我们在质量保障过程中,从需求阶段的开卡开始,就投入了测试工程师参与其中,针对研发工程师在完成需求过程中需要变更的接口提前准备了接口自动化测试的case,并且在完成验卡后通过流水线触发新增接口的自动化测试完成对应的质量保障活动,这一些的投入都是为了能够提高交付过程的流畅度。如果自动化测试在触发的时候出现了失效,我们更希望于这个失效状态都是被测系统的BUG导致的,但是现实中往往很多时候是由于一些外部系统的依赖、本地测试数据的污染等一些外围原因导致的,而不是被测试系统的BUG,这就是BUG误报,我们简称误报。

虽然不是被测试系统的BUG引起的测试失效,但是误报同样需要重视,因为它导致测试工作的返工。针对误报,可以通过添加技术需求卡的形式进入迭代过程阶段,这样既可以在团队中形成留痕也可以促使该种引起误报的问题不再出现。在添加完卡片后,就有研发工程师自己是情况而定是在本次迭代解决还是在未来某次迭代解决。


漏报的损失

在第一版软件评测师教程中提出的软件测试的原则就明确指出“完全的测试事不可能的,测试需要终止”。这也就导致所有的测试手段都不能穷尽所有变更中包含的BUG,所有的线上系统都是有缺陷的,我们将遗漏到客户的缺陷称作漏报。


漏报的结果就是会造成生产缺陷或者故障,从而引起一定的损失。这也和金融行业的风险与损失的概念一样。风险是损失发生的可能性,或可能发生的损失。损失本质上是一个偏于事后的概念,反映的是风险事件发生后状况,而风险却是一个明确的事前概念,反映的事损失发生前的事物发展状态。虽然说所有的交付系统都有BUG,但是我们还是寄希望于在测试过程中发现全部的BUG,虽然这还是一个不可能完成的事情,一些能被用户主动触发的BUG还是应该在制品过程中被解决。


那么当出现BUG漏报的时候,我们主观对漏报的BUG进行分级处理,针对严重级别高的漏报BUG行复盘,复盘过程是为了找出制品过程中的问题,从而弥补。保障同类问题不再出现,而不是为了追责。推荐复盘记录的一些关键要素:动作和事件时间表主要按照时间线记录发现、处理漏报BUG的动作、时间;漏报BUG的发现现象:这里重点记录是如何发现漏报BUG的,从而找出是否需要建立一些Action弥补对应的问题;级别:漏报BUG的级别,从而可以识别影响范围;后果和决定,也就是后续的需要解决该类问题不再发生的Action。


误报和漏报都是浪费


误报会引起返工,漏报会引起损失,这两种的结果都是制品过程中的浪费,因此我们应该通过各式各样的手段,防止误报的出现,阻止漏报的发生。这里面既有技术方法也有组织约束,但是每一种都是站在制品团队的技术改进之上来完成的,而不是为了寻找“背锅侠”而付出的努力。

目录
相关文章
|
8月前
|
关系型数据库 新能源 调度
【matlab测试与修正】考虑源荷两侧不确定性的含风电电力系统低碳调度
【matlab测试与修正】考虑源荷两侧不确定性的含风电电力系统低碳调度
|
搜索推荐 IDE 测试技术
如何验证程序是否完成,测试以及修正Bug?
在日常中,我们码代码都是按照需求来的,为了验证我们的工作成果是否符合项目的需求,那么验证程序是否完成、测试以及修复bug就成了我们工作中非常重要的流程。
|
5天前
|
数据可视化 前端开发 测试技术
接口测试新选择:Postman替代方案全解析
在软件开发中,接口测试工具至关重要。Postman长期占据主导地位,但随着国产工具的崛起,越来越多开发者转向更适合中国市场的替代方案——Apifox。它不仅支持中英文切换、完全免费不限人数,还具备强大的可视化操作、自动生成文档和API调试功能,极大简化了开发流程。
|
5天前
|
存储 测试技术 数据库
接口测试工具攻略:轻松掌握测试技巧
在互联网快速发展的今天,软件系统的复杂性不断增加,接口测试工具成为确保系统稳定性的关键。它如同“翻译官”,模拟请求、解析响应、验证结果、测试性能并支持自动化测试,确保不同系统间信息传递的准确性和完整性。通过Apifox等工具,设计和执行测试用例更加便捷高效。接口测试是保障系统稳定运行的第一道防线。
|
5天前
|
Web App开发 JSON 测试技术
API测试工具集合:让接口测试更简单高效
在当今软件开发领域,接口测试工具如Postman、Apifox、Swagger等成为确保API正确性、性能和可靠性的关键。Postman全球闻名但高级功能需付费,Apifox则集成了API文档、调试、Mock与自动化测试,简化工作流并提高团队协作效率,特别适合国内用户。Swagger自动生成文档,YApi开源但功能逐渐落后,Insomnia界面简洁却缺乏团队协作支持,Paw仅限Mac系统。综合来看,Apifox是国内用户的理想选择,提供中文界面和免费高效的功能。
|
1月前
|
监控 JavaScript 测试技术
postman接口测试工具详解
Postman是一个功能强大且易于使用的API测试工具。通过详细的介绍和实际示例,本文展示了Postman在API测试中的各种应用。无论是简单的请求发送,还是复杂的自动化测试和持续集成,Postman都提供了丰富的功能来满足用户的需求。希望本文能帮助您更好地理解和使用Postman,提高API测试的效率和质量。
103 11
|
2月前
|
JSON Java 测试技术
SpringCloud2023实战之接口服务测试工具SpringBootTest
SpringBootTest同时集成了JUnit Jupiter、AssertJ、Hamcrest测试辅助库,使得更容易编写但愿测试代码。
83 3
|
3月前
|
JSON 算法 数据可视化
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)
这篇文章是关于如何通过算法接口返回的目标检测结果来计算性能指标的笔记。它涵盖了任务描述、指标分析(包括TP、FP、FN、TN、精准率和召回率),接口处理,数据集处理,以及如何使用实用工具进行文件操作和数据可视化。文章还提供了一些Python代码示例,用于处理图像文件、转换数据格式以及计算目标检测的性能指标。
95 0
测试专项笔记(一): 通过算法能力接口返回的检测结果完成相关指标的计算(目标检测)
|
4月前
|
移动开发 JSON Java
Jmeter实现WebSocket协议的接口测试方法
WebSocket协议是HTML5的一种新协议,实现了浏览器与服务器之间的全双工通信。通过简单的握手动作,双方可直接传输数据。其优势包括极小的头部开销和服务器推送功能。使用JMeter进行WebSocket接口和性能测试时,需安装特定插件并配置相关参数,如服务器地址、端口号等,还可通过CSV文件实现参数化,以满足不同测试需求。
293 7
Jmeter实现WebSocket协议的接口测试方法

热门文章

最新文章