闲鱼技术2022年度白皮书-技术质量主题-这半年我做交易链路自动化回归的那些事儿(下)

简介: 闲鱼技术2022年度白皮书-技术质量主题-这半年我做交易链路自动化回归的那些事儿

接上篇:https://developer.aliyun.com/article/1225735?spm=a2c6h.13148508.setting.31.595d4f0eudDbz0


三、 方案说明

 

通过接口流量录制回放、定海神针场景链路验证的方式,形成自动化测试任务集,在交易核心应用发布过程中,新增发布流水线的测试验证节点,当应用完成安全生产环境部署后,自动化触发执行关联的测试任务。测试任务执行后,验证当前的自动化结果情况、应用核心测试集校验情况。根据应用预先配置的卡点阀值来判断卡点校验是否通过。如果卡点校验通过,则可以继续进行后续的发布流程。如果卡点校验未通过(即自动化验证失败),需要立即定位自动化失败的具体原因,避免将变更问题带到线上,以及发布流程的长时间阻塞。基于此,来看看闲鱼交易下的自动化体系建设思路:

 

image.png


1. 自动化测试集设计

 

编写并选择测试用例是实现自动化验证的核心。合理的用例设计,既保证自动化的效益和可靠性,又便于测试集的维护和扩展。对于业务场景多、操作多样化的闲鱼交易域,在自动化测试集设计上,需要确认的问题是:

 

想要实现自动化验证最大产出,在开始实施时,应该选择哪些用例加入自动化测试任务集?

对于预先定义的一组或多组输入、输出数据,自动化结果具备可预测性吗?

 

基于以上的考量,进行接口链路的编排,并借助接口测试工具来实现交易场景的自动化覆盖。借助集团的定海神针平台,进行链路自动化用例编写,包括以下两个方面:

 

 

1) 数据预置

 

在用例编写前,需要准备有效的测试数据,使用例能够真正地执行起来。不同类型的商品数据、买/卖家用户身份及账号数据、交易资金等都作为生成交易订单的预置数据,需要和用例编写分开,不仅减少用例执行成本,更减少用例之间的耦合度。此方案设计中采用闲鱼测试设计的测试数据构造平台进行数据生成和获取。

 

image.png


2) 用例编写

 

准备好测试数据后,在编写场景用例时需要注意:

 

合理分解:拆分复杂交易场景和业务逻辑,区分原子场景,避免测试失败时阻断其他功能用例的执行,快速得到测试结果,提高用例执行稳定性。

 

简化用例:根据交易链路节点可复用的性质进行用例简化。例如在场景分解后,验证发货场景时,不需要重复构造订单数据,复用上一节点的订单即可。复杂的执行和校验可能影响发布节奏,给理解、调试和维护带来更大的成本和挑战。

 

多层校验:设计合理的断言,避免由于用例原因造成的随机失败。校验规则覆盖接口契约、订单数据(订单标/订单状态/订单操作)、业务规则各层次。并学会从线上问题里找反思,补充校验点。

 

体现业务特性:了解用户和应用的交互,在用例编写时体现用户使用系统的实际端到端的历程,而不只是自动验收标准的集合,片面强调覆盖率。在交易场景用例中覆盖领域交互的验证,增加对交易状态流转后,买/卖家系统异步消息通知卡片的校验、资金流向校验等。

 

下图是以闲鱼内基础C2C交易为例,进行业务测试用例拆分:

 

image.png


2. 发布流水线卡点

 

完成自动化测试用例沉淀后,将接口、链路质量验证能力与应用发布关联。基于变更管控,完成自动化回归验证、发布卡点。利用发布流水线将开发、测试、发布、验证等关键活动串接在一起,没有间断和跳过,流畅优雅。首先简单介绍:

 

集团内开放Aone平台,提供完整的产品全生命周期管理和协作能力。在应用发布内,Aone整合了产品部署发布、持续集成服务和测试执行实验室,升级流水线能力,关联研发流程中的各个阶段,实现了自动化的构建、部署、测试与发布,确保让代码能够快速、安全的部署到产品生产环境中,提升整个研发体系的效率。

 

image.png

依赖Aone发布流水线能力,可以在Aone发布流程中平稳地支持测试校验,自动触发和运行测试任务:在交易核心应用变更代码部署完成后,自动执行指定的测试任务校验测试,更新用例回归结果并自动决策研发流程的执行,直观体现质量信息。在自动化验证失败时阻断发布,进行100%通过率强卡点,即卡点校验项未通过时,无法继续进行后续的发布流程,若想继续需进行特殊审批。

 

image.png

四、 总结及展望

 

目前交易链路自动化回归已经覆盖了交易内核心应用的接口质量验证,同时覆盖了基础C2C业务下场景链路质量验证能力。基础C2C交易回归验证由原先的手工耗时半小时、频繁账号切换和点击操作,缩短至一分钟内自动完成,极大减少手工验证的重复性,提供更优的质量保障能力和执行效率。

 

本着没有适当的测试策略,不给予自动化测试的基本原则,闲鱼交易域内的自动化体系建设,是建立在基建完善的基础上,比如解决了数据构造问题、应用环境隔离、发布流水线引擎的基建统一等,进而助推质量保障、降低发布风险。后续我们将持续推进基建,沉淀更多核心业务场景下的自动化测试任务集,最终实现向用户持续高效地交付价值。

相关文章
|
8天前
|
机器学习/深度学习 人工智能 安全
智能家居技术的未来:从智能音箱到全屋自动化
探索智能家居技术的前沿,本文将带你了解如何通过集成创新技术,如物联网(IoT)、人工智能(AI)和机器学习,将简单的智能音箱转变为全面的全屋自动化系统。我们将深入探讨这些技术如何相互协作,提高家居生活的便捷性、安全性和能效,同时展望未来智能家居可能带来的变革。
|
9天前
|
机器学习/深度学习 存储 人工智能
智能家居技术的未来:从自动化到AI的演进
【8月更文挑战第11天】 本文将探索智能家居技术的演变历程和未来趋势,从最初的自动化设备到现在集成人工智能(AI)的系统。我们将深入了解AI如何改变我们与家居环境的互动,以及这些变化对日常生活的影响。文章旨在为读者提供智能家居技术发展的宏观视角,同时揭示AI在未来家居生活中扮演的核心角色。
27 2
|
13天前
|
机器学习/深度学习 人工智能 安全
智能家居技术的未来:从自动化到人工智能的演进
本文深入探讨了智能家居技术的发展轨迹,从早期的自动化控制到现在集成人工智能技术的高级应用。文章将展示如何通过创新技术增强家居安全、效率和舒适度,同时指出未来智能家居面临的挑战与机遇。
|
13天前
|
人工智能 搜索推荐 智能硬件
智能家居技术的未来:从自动化到人工智能
在这篇文章中,我们将深入探讨智能家居技术的发展趋势。从早期的自动化设备到现在的人工智能驱动系统,智能家居技术已经取得了巨大的进步。然而,这只是一个开始。未来的智能家居将更加智能,更加个性化,更加环保。我们将详细讨论这些趋势,并通过实例来展示它们如何改变我们的生活。
|
13天前
|
监控 安全 数据挖掘
Python自动化交易
【8月更文挑战第7天】随着科技发展,自动化交易成为高效智能的投资方式。Python因其实用性和灵活性,在此领域大放异彩。本文介绍使用Python进行自动化交易的流程,包括获取市场数据、制定交易策略、执行交易、风险管理、监控与优化、实时监控及通知、心态管理、安全与隐私保护以及持续学习与优化等方面,并提供了具体的代码示例。通过这些步骤,读者可以构建自己的自动化交易系统,实现稳健的投资回报。
23 2
|
16天前
|
人工智能 大数据 物联网
智能家居技术的未来:从自动化到智能化
在这篇文章中,我们将深入探讨智能家居技术的未来发展趋势。从自动化到智能化,智能家居技术正在经历一场革命性的变革。我们将分析这场变革的原因,并预测其未来的发展方向。通过具体的实例和数据,我们将展示智能家居技术如何改变我们的生活,并引发读者对于未来生活方式的思考。
|
4天前
|
机器学习/深度学习 人工智能 监控
智能家居技术的未来:从自动化到人工智能
在这篇文章中,我们将探索智能家居技术的演变,从简单的自动化到复杂的人工智能系统。我们将讨论如何通过物联网(IoT)、机器学习和大数据分析等技术,使家居设备更加智能化,提高生活质量并节省能源。最后,我们将展望智能家居技术的未来发展方向。
|
4天前
|
数据采集 存储 监控
用爬虫技术玩转石墨文档:自动化数据处理与信息提取的新探索
在当今数字化时代,文档协作与管理成为了职场人士日常工作中不可或缺的一部分。石墨文档,作为一款功能强大的在线文档工具,凭借其云端存储、多人实时协作、丰富的文档格式支持等特点,赢得了广泛的用户群体。然而,随着数据量的激增,如何高效地管理和利用这些数据成为了一个亟待解决的问题。此时,爬虫技术便成为了我们玩转石墨文档、实现自动化数据处理与信息提取的强大工具。
12 0
|
5天前
|
机器学习/深度学习 人工智能 物联网
智能家居技术的未来:从自动化到智能化
本文将探讨智能家居技术的发展,从早期的自动化设备到现在的智能化系统。我们将看到如何通过物联网、人工智能和机器学习等技术,使家居设备更加智能,提高生活便利性,节省能源,甚至提高安全性。最后,我们将展望智能家居技术的未来,包括可能出现的创新和挑战。
|
14天前
|
机器学习/深度学习 人工智能 物联网
智能家居技术的未来:从自动化到自主化
本文将探讨智能家居技术的演进,从早期的简单自动化设备到现今的智能互联系统,再到未来可能实现的完全自主化的家居环境。我们将分析当前技术的限制、未来技术的潜力以及这些变化如何影响我们的日常生活。通过具体案例和预测数据,本文旨在提供一个全面的视角来理解智能家居技术的未来趋势。
21 0

热门文章

最新文章