【实测】关于‘钱学森弹道’应用软件测试的设计与实现(02)【4个具体方案】

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: 【实测】关于‘钱学森弹道’应用软件测试的设计与实现(02)【4个具体方案】

   实测系列是纯硬核技术文章,并且是博主亲自演示已经落地取得一定成果的技术和原创教程,无偿进行分享,大家一键三连,支持一下!

   上一节,我们大致明白了钱学森弹道技术应用在软件测试领域的背景和意义,算是补足了一个小技术黑洞。本节课我们就来讨论下实现的方案有哪些?毕竟是要在无数个随机方向事件后能确定走到目标的技术,在外界眼里看起来,这发导弹或者说自动化driver,就像在故意做着很多战术性欺骗动作,最终冷不丁的突然实现目的。

    下面开始说说实现思路,大致有以下几点:

   1. 完全随机碰撞法

    在ui自动化的过程中,我们把模拟人手进行操作的驱动driver比作是这枚按照钱学森弹道的导弹。完全随机碰撞法,姑且先叫这个名字。

   意思就是driver的具体操作是没有方向的,完全凭随机,在driver走到每个节点(页面)后都会完全随机的操作而去到另一个节点或促进另一个步骤,所以在A->E的过程中,运气最好的最短路程是直接A-B-C-D-E,运气不好的情况下,就可能是A-B-A-B-C-B-A-B-C-D-B-...(n多步骤)...-D-E,当然,步骤越多,就越偏离真实用户的操作,所以可以给这个办法设置一个最大步骤数,比如还是房源下单流程,正常下单是5步,那我们就可以划定范围为最大20步,当我们的程序启动后,会生成很多个路线,其中但凡超过20步,就直接终止废弃,经过相当长时间后,查重率接近90%(或某个其他阙值)后,终止程序。此时我们就会获得相当数量的低于20步的路线用例了,然后可以用driver去自动执行这些用例即可。

   这个方法的优点是算法比较简单,很容易实现,相当于在传统monkey的基础上,增加了目标点(即:终止条件),又规定了最大步骤数,又可以记录路线用例,又进行去重。但其中的回头路走的实在太多,确实不太像正常用户的行为。下面介绍改进方案:

   2. 免回头随机法

   依然是这个driver,在各个节点的随机动作中,进行了方向的指定,避免了走大量回头路的可能(或者规定最多走一步回头路,比如下错订单返回修改,然后修改后继续提交)。

   所以在这个过程中,我们需要监控,一旦driver在节点随机时出现了回头现象,也就是走刚走过的节点,就进行记录,超过最大可回头数就直接过滤掉更古老的回头节点。

   比如规定最大回头数0 ,即不可回头:A-B-C ,当driver在C节点继续随机下一步的时候,就要自然而然的过滤掉刚刚走过的B节点。

   如果规定最大回头数1,即最多回头1次:A-B-C,当driver在C节点继续随机下一步的时候,我们是允许走回B节点的,但要过滤A节点。也就是说:我们允许【A-B-C-B-A之外节点】,但不允许【A-B-C-B-A】,如果C可以直接返回到A的话也不允许【A-B-C-A】。

   这个方法下,我们可以直接避免大量回头太多的现实场景基本不出现的路线用例,性价比得到了显著提高。但,本质上,仍然是随机法,不具备钱学森弹道的目标趋向性,也极有可能出现死循环路线,如【A-B-C-B-C-B-C....】,也就是说,距离最真实用户行为还是有差距。所以继续看优化方案:

 3.行为模拟随机法

     其实,如果你能拿到你们线上服务器的用户日志或埋点数据,就可以统计出很多信息,比如各个页面的用户操作占比。

   举个例子:用户在某产品详情页,点开评价的行为占比50%,点开商铺主页的行为占比10%,直接下单的占比30%,返回上一层的占比10%。

   此时你就会发现,这其实并非完全随机的概率,并非是等分1/4。所以,用更少的用例来,覆盖最真实的场景,就成了性价比更高的方案。此时在我们的driver算法中,在某个节点后,在下一个操作的随机选择算法中,就要按照具体的日志统计,来强行改变概率。

   比如你随机的列表是[评价,主页,下单,返回] ,此时随机就是1/4。如果改成如下方案[评价,评价,评价,评价,评价,主页,下单,下单,下单,返回] ,即可模拟出大致概率,这个列表页并非我们手动设置,只需要去读取线上日志自动生成即可,并不难。难的是,影响概率的情况是比较多的,不能取单一的片段,比如早上和晚上,工作日和节假日,双十一和平时。而软件产品的性能和线上服务器的动态调控负载均衡等问题,也可能会影响测试效果,这些都需要和开发运维同事合作来制定具体计划哦~ 。

   但这种方案是需要大量线上日志来模拟出用户真实动作的,如果我们不具备这个条件呢?我只是个小测试,没有调取线上生产环境服务器日志的权限。所以你要来看看更优化的方案:目标趋向随机法

   欢迎继续收看本系列!

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
25天前
|
敏捷开发 测试技术 持续交付
探索自动化测试在敏捷开发中的应用与挑战
本文深入探讨了自动化测试在现代软件开发流程,特别是敏捷开发环境中的重要作用和面临的挑战。通过分析自动化测试的基本原理、实施策略以及在实际项目中的应用案例,揭示了其在提高软件质量和加速产品交付方面的巨大潜力。同时,文章也指出了自动化测试实施过程中可能遇到的技术难题、成本考量及团队协作问题,并提出了相应的解决策略,为软件开发团队提供了有价值的参考和指导。
|
1月前
|
编解码 测试技术 开发工具
测试 iPhone 应用在不同屏幕尺寸和分辨率下的响应式效果
【10月更文挑战第23天】测试 iPhone 应用在不同屏幕尺寸和分辨率下的响应式效果是确保应用质量和用户体验的重要环节。通过手动测试、自动化测试、视觉效果评估、性能测试、用户体验测试等多种方法的综合运用,能够全面地发现应用在响应式效果方面存在的问题,并及时进行解决和优化。同时,持续的测试和优化也是不断提升应用质量和用户满意度的关键。
|
14天前
|
自然语言处理 安全 测试技术
基于大模型的应用的测试的一些注意事项
大模型应用测试需注意三大冲突:时间敏感性冲突,即模型数据可能随时间变得过时;数据真实性冲突,指训练数据中可能存在虚假信息,影响模型准确性;数据一致性冲突,表现为模型对语义相同但句法不同的输入反应不一。测试时应针对这些问题设计用例,确保模型性能。
47 4
|
27天前
|
前端开发 数据管理 测试技术
前端自动化测试:Jest与Cypress的实战应用与最佳实践
【10月更文挑战第27天】本文介绍了前端自动化测试中Jest和Cypress的实战应用与最佳实践。Jest适合React应用的单元测试和快照测试,Cypress则擅长端到端测试,模拟用户交互。通过结合使用这两种工具,可以有效提升代码质量和开发效率。最佳实践包括单元测试与集成测试结合、快照测试、并行执行、代码覆盖率分析、测试环境管理和测试数据管理。
48 2
|
27天前
|
Web App开发 定位技术 iOS开发
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
Playwright 是一个强大的工具,用于在各种浏览器上测试应用,并模拟真实设备如手机和平板。通过配置 `playwright.devices`,可以轻松模拟不同设备的用户代理、屏幕尺寸、视口等特性。此外,Playwright 还支持模拟地理位置、区域设置、时区、权限(如通知)和配色方案,使测试更加全面和真实。例如,可以在配置文件中设置全局的区域设置和时区,然后在特定测试中进行覆盖。同时,还可以动态更改地理位置和媒体类型,以适应不同的测试需求。
32 1
|
28天前
|
前端开发 JavaScript 数据可视化
前端自动化测试:Jest与Cypress的实战应用与最佳实践
【10月更文挑战第26天】前端自动化测试在现代软件开发中至关重要,Jest和Cypress分别是单元测试和端到端测试的流行工具。本文通过解答一系列问题,介绍Jest与Cypress的实战应用与最佳实践,帮助开发者提高测试效率和代码质量。
32 2
|
2月前
|
监控 测试技术 持续交付
掌握跨平台测试策略:确保应用的无缝体验
【10月更文挑战第14天】在多元化设备和操作系统的今天,跨平台测试策略成为确保应用质量和性能的关键。本文探讨了跨平台测试的重要性、核心优势及实施步骤,涵盖Web、移动和桌面应用的测试方法,帮助开发者提高应用的无缝体验。
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
探索AI在软件测试中的创新应用与实践###
本文旨在探讨人工智能(AI)技术如何革新软件测试领域,提升测试效率、质量与覆盖范围。通过深入分析AI驱动的自动化测试工具、智能化缺陷预测模型及持续集成/持续部署(CI/CD)流程优化等关键方面,本研究揭示了AI技术在解决传统软件测试痛点中的潜力与价值。文章首先概述了软件测试的重要性和当前面临的挑战,随后详细介绍了AI技术在测试用例生成、执行、结果分析及维护中的应用实例,并展望了未来AI与软件测试深度融合的趋势,强调了技术伦理与质量控制的重要性。本文为软件开发与测试团队提供了关于如何有效利用AI技术提升测试效能的实践指南。 ###
|
25天前
|
NoSQL 测试技术 Go
自动化测试在 Go 开源库中的应用与实践
本文介绍了 Go 语言的自动化测试及其在 `go mongox` 库中的实践。Go 语言通过 `testing` 库和 `go test` 命令提供了简洁高效的测试框架,支持单元测试、集成测试和基准测试。`go mongox` 库通过单元测试和集成测试确保与 MongoDB 交互的正确性和稳定性,使用 Docker Compose 快速搭建测试环境。文章还探讨了表驱动测试、覆盖率检查和 Mock 工具的使用,强调了自动化测试在开源库中的重要性。
|
18天前
|
JSON Java 测试技术
SpringCloud2023实战之接口服务测试工具SpringBootTest
SpringBootTest同时集成了JUnit Jupiter、AssertJ、Hamcrest测试辅助库,使得更容易编写但愿测试代码。
52 3