单元测试极大地提高C/C++应用质量

简介: 如果你没有执行单元测试,你就会同时失去第一时间改善软件质量和削减开发时间和成本的机会。这种牺牲当然是令人失望的。在此之前,开发人员一直没有一种可行的方法来执行单元测试。

介绍

如果你没有执行单元测试,你就会同时失去第一时间改善软件质量和削减开发时间和成本的机会。这种牺牲当然是令人失望的。在此之前,开发人员一直没有一种可行的方法来执行单元测试。现在,JAVA开发人员能够使用ParaSoft的Jtest自动化JAVA单元测试,而C/C++开发人员能够利用ParaSoft最新的C++Test工具自动化C/C++单元测试。

本文阐述了执行单元测试的方法、优点和难点,然后描述了C++Test任何能够给C/C++开发人员带来巨大的好处。

什么是单元测试?

我们对单元测试的定义是测试应用中最小的单元,如C/C++中的一个类。C/C++单元测试的目的是执行每个类中的每一个方法或函数,检测所有存在的功能性问题、错误和构造弱点。发现这些典型的问题通常涉及到三种测试方法:黑盒测试、白盒测试和回归测试。黑盒测试通过确定类的公共界面是否依照定义执行,检查类的功能性;执行这种类型的测试不需要有关实现细节的知识。白盒测试通过确定类在遇到非预期输入时执行是否正确,检查所有的类的方法和函数(包括保护和私有成员)的健壮性;执行这种类型的测试需要对类的实现细节的完整知识。回归测试检查是否类的修改会在原来正确的代码中引入新的错误。

什么是单元测试的优点?

单元测试被公认为软件开发过程中的一个关键步骤。单元测试能够简化错误检测,在减少开发时间和成本的同时提高软件质量。

单元测试促进错误检测的第一个方面是使你更接近错误。

单独测试一个类时(与其它对象分离),由于更接近错误,找到潜在的错误就会变得容易得多。用上述台球的例子来比喻,就像是台面上只有壹两个球时,一杆将一个球击入指定的袋中。

单元测试促进错误检测的第二个方面是,将你从在问题中艰难跋涉去修正一个简单错误的困境中解救出来。因为错误是相互关联和作用的,在较高的层次上找到和修正一个错误,常常会发现另外的问题。当你在较高层次上测试时,原始的错误就象是洋葱的最内层一样,另外的错误就象紧包着内层的其它层:只有把外层都剥掉才能看到最内层。当你测试每一个类时,错误还很少有机会建立在其它错误之上,并相互作用引起奇怪的行为。因此在单元级上检测错误会容易的多。

最重要的结果是,更容易的错误检测能够在改善应用质量的同时大量削减开发时间和成本。首先,由于能够更容易地找到错误,就会减少发现它们的时间和资源。其次,由于你一写完一个类,就能发现和改正其中的错误,你就不需要在以后花费时间重新了解和摸索。最后,最重要的理由是:由于类的相互作用和关联性,在单元级修改一个类只会影响到原始的类,而在较高的层次上修改一个类可能会改变多个程序部件的设计和功能性。越迟发现问题,通常就要修改越多的代码。当修改的代码量增加时,两个其它因素也会随之增加:

  • 修改每一个错误所需的时间和费用。
  • 在代码中引入新的错误的机会。

一次又一次的研究证明,随着问题被检测出来的时间的推迟,发现软件错误所需的时间和成本会惊人地增加。请看下面的研究结果:

  • IBM: 根据IBM的一份内部资料指出,确定软件错误的相对成本是:在设计阶段,1.5;编码前,1;编码中,1.5;测试前,10;测试中,60;交付后,100。[Watts Humphrey]
  • TRW: 确定错误的相对时间:需求分析阶段,1;设计阶段,3-6;编码阶段,10;开发测试阶段,15-40;接受性测试阶段,30-70;应用运行中,40-1000。[Boehm]
  • IBM: 确定错误的相对时间:设计评审,1;代码检查,20;测试,82。[Remus]
  • JPL: Bush得出的每个错误的平均成本:编码,US$90-US$120;测试,US$10,000。[Bush]
  • Freedman and Weinberg: 使用设计评审和代码检查手段的项目在测试时发现错误的数量会减少10倍,测试成本降低50%-8%,包括评审和检查的成本。[Freedman]

什么是单元测试的难点?

基于上述信息,单元测试看上去就象一剂万能药。如果是这样的话,为什么每一个C/C++开发人员不马上对每一个类进行单元测试?就目前可以使用的技术来说,对C/C++的单元测试是一件困难、烦琐和耗时的事情,没有很好的工具来自动化这一过程,使得许多C/C++开发人员望而生畏。

执行单元测试的第一步是是目标类变得可测。这需要两个工作:

  • 设计一个运行目标类的测试驱动程序。
  • 设计桩函数,它们为被测类所引用的任何外部资源返回值。

建立一个测试驱动,需要建立一个新的类,除了测试原始类以外它不能用于任何其它目的。测试驱动应该具有下列特性:

  • 一个指定设置和清除的标准方式。
  • 一个选择个别测试和所有有效测试的方法。
  • 一个分析输出的预期(或非预期)结果的机制。
  • 一个标准的错误报告形式。

为了充分而正确地测试类,你需要设计一个能够完全检查被测类的测试驱动;若干次修改和重写这样一个测试驱动是免不了的。一旦建立了测试驱动,你必须仔细检查它不能包含任何错误。测试驱动中的一个错误会破坏这个测试,但是你无法单独测试一个类,你也不能测试测试驱动本身。

如果你的类引用任何还没有准备好或不可访问的外部资源(如外部文件、数据库和CORBA对象等),你必须建立相应的桩函数,它们的返回值类似于这些实际的外部资源应该返回的值。当建立这些桩函数时,你需要选择桩函数的返回值,它们将影响程序的执行路径...

  • 为了测试类的功能性必须执行任何的路径,
  • 足够的路径能够提供彻底的测试覆盖性。

下一步是设计和建立合适的测试用例。为了彻底地测试类的结构和功能性,你应该设计两中类型的测试用例:黑盒和白盒。

黑盒测试用例基于说明和规格文档。特别地,至少应该为规格文档的每个入口建立一个测试用例;更好的是这些测试用例能够测试每个入口的各种边界条件。还需要为发现的每一个错误增加另外的测试用例,以及任何你认为必要的其它测试。

白盒测试用例通过各种不同的输入充分地执行类的所有方法以发现缺陷。对于手工测试来说这是非常困难的。为了建立有效的白盒测试用例,你必须研究类的内部结构,然后编写测试用例尽可能完全地覆盖类的所有方法,以及覆盖所有可能引起类崩溃的输入。要达到较高的测试覆盖性,需要有效的白盒测试用例它们能够执行相当多数的路径。例如,一个典型的1万行的程序,大约有1亿条可能的路径;手工建立能够执行所有这些路径的输入几乎是不可行的。

在建立这些测试用例以后,你将要执行整个测试用例并分析结果,确定在那里出现了错误、崩溃和薄弱环节。你还需测量这些测试的覆盖性,以确定类被测试的程度以及需要追加的测试用例。

任何时候一个类被修改后,你应该执行回归测试,保证没有引入新的错误和/或原来的错误已经被更正了。回归测试包括白盒和黑盒测试用例,并且分析结果以确定类的质量是否得到的改善。

C++Test: 一个自动化的单元测试解决方案

ParaSoft认识到了C/C++单元测试内在的的价值和难度,开发了C++Test,一个自动的C/C++单元测试工具,增强了ParaSoft的自动错误防止和错误检测产品线。C++Test自动执行所有可能的单元测试过程。特别地,它能够自动:

  • 建立每个被测类的测试驱动程序。
  • 建立任何必要的桩函数,并允许你定制这些桩函数的返回值或加入自己的桩函数。
  • 单键执行白盒测试的所有步骤。
  • 生成黑盒测试用例的基础集合。
  • 运行黑盒测试用例。
  • 生成黑盒测试的输出结果。
  • 执行回归测试。
  • 跟踪测试覆盖性。

C++Test能够测试所有类型的C/C++项目;C++Test甚至能够支持COM对象,允许你对调用COM对象方法的类和方法执行自动的单元测试。

C++Test还是高度可定制的;例如,你可以改变测试用例的生成参数,过滤一定的文件、类或方法,在任何层次上(从这个项目到单个方法或测试用例)进行测试。

另外,C++Test很容易与你目前的开发过程合作。C++Test直接安装在DevStudio环境中,因此你能够立即测试任何正在开发中的类。只要在Developer Studio的工具栏上按下Test FileTest Project按钮,那么C++Test就会自动在C++Test图形用户界面中打开你的文件,为每个类建立一个测试驱动程序并自动测试每个类。

C++Test实时跟踪测试覆盖性,然后建立一个综合测试覆盖性报告。覆盖性窗口图示化地说明了当前正在被执行的代码行,已执行过的行和每行的执行次数。因此,它不仅指出了一个代码行是否被测试过,而且说明了被测试的有多彻底。这些信息对于确定那些代码需要追加测试是非常有帮助的。

6. 集成的单步调试

如果你选择在方法测试时捆绑调试器,C++Test将自动自动激活Microsoft Visual C++调试器,这样使得你在用C++Test测试任何方法时仍然能够方便地进行单步调式。

7. 防止错误

C++Test能够自动执行两种类型的变成标准。其内建的特性允许你自动执行动态的变成标准,如“总是对每个类执行单元测试”和“总是单步调试类”等。另外,假如你使用CodeWizard--ParaSoft的自动化可定制编程标准强化工具,C++Test可以自动运行CodeWizard。

8. 运行时错误检测

C++Test还能帮助你执行类一级的运行时错误自动检测。如果你安装了Insure++,C++Test可以自动运行类和方法通过Insure++,它将检查下列错误:

  • 内存引用错误/内存未初始化
  • 内存泄漏
  • 内存分配错误
  • 变量定义冲突
  • I/O错误
  • 指针错误
  • 库调用错误
  • 逻辑错误
  • 算法错误

这意味着你能够在类开发的第一时间检测运行时错误,而且无需自己做任何运行数据。C++Test自动生成大量而精心设计的测试用例,能够帮助你更彻底、更方便和更快速地检测运行时错误。

结论

通过执行单元测试,你能够有效地防止许多错误的出现,尽早检测出已存在的错误,并且比其它测试手段和技术更有效。影响C/C++开发人员执行单元测试的主要障碍是需要消耗大量的时间的资源,目前的一些单元测试工具仍然存在着这样的问题。C++Test的推出克服了这一障碍。C++Test做到了开发人员总是希望却不敢相信的事情:自动化C/C++单元测试。

目录
相关文章
|
16天前
|
测试技术 持续交付 UED
探索自动化测试框架:提高软件质量的利器
在软件开发周期中,自动化测试框架扮演着至关重要的角色。本文将深入探讨自动化测试框架如何提升测试效率、确保软件质量和促进持续集成/持续部署(CI/CD)的实施。文章将分析自动化测试的优势、挑战以及实施策略,为读者提供一份全面的自动化测试指南。
|
10天前
|
敏捷开发 jenkins 测试技术
探索自动化测试在敏捷开发中的应用
随着软件开发方法的不断演进,敏捷开发逐渐成为主流。然而,在不断迭代的开发过程中,确保软件质量却成了一大挑战。本文探讨了自动化测试在敏捷开发环境中的重要性、应用场景以及最佳实践,以期为开发团队提供有效的参考。
21 2
|
2天前
|
测试技术 Go Python
在python中测试应用
【6月更文挑战第29天】本文介绍Python的unittest是内置的单元测试框架,适合线性控制流的代码测试。并举实例说明,如何组织测试代码,如何构造脚手架和测试套件。
17 6
在python中测试应用
|
16小时前
|
负载均衡 Java 测试技术
性能测试与负载均衡:保证Java应用的稳定性
性能测试与负载均衡:保证Java应用的稳定性
|
3天前
|
人工智能 安全 测试技术
现代软件测试方法及其在质量保证中的应用
在当今快节奏的软件开发环境中,软件测试作为确保产品质量的关键环节变得越发重要。本文探讨了现代软件测试方法的发展趋势及其在提升质量保证方面的应用。通过分析各种测试方法的优势和适用场景,可以帮助开发团队更有效地管理和提高软件产品的质量,以满足不断增长的用户需求。
|
3天前
|
Devops 测试技术 持续交付
软件测试中的敏捷实践:从理论到应用
在软件开发领域,敏捷方法论的兴起已经彻底改变了项目的开发和测试流程。本文将深入探讨如何在软件测试中实施敏捷实践,以及这些实践如何提高产品质量和团队效率。通过引用最新的行业报告、科学研究和统计数据,文章旨在为读者提供一套清晰的指导框架,帮助他们在软件测试过程中实现敏捷性。
6 0
|
12天前
|
监控 数据管理 测试技术
自动化测试:提升软件质量的关键
【6月更文挑战第19天】自动化测试在软件质量保障中至关重要,通过使用工具执行测试用例,提高效率、减少错误。关键技术包括测试框架(如Selenium)、测试脚本编写、测试数据管理和测试执行监控。虽面临脚本维护、数据管理等挑战,但自动化测试能提升软件质量,降低成本,加快交付速度,并将在未来持续影响软件行业。
|
10天前
|
机器学习/深度学习 敏捷开发 人工智能
自动化测试的崛起:如何利用AI提升软件质量
【6月更文挑战第20天】在软件开发的浪潮中,自动化测试已成为确保产品质量的关键工具。随着人工智能(AI)技术的飞速发展,其在自动化测试中的应用日益广泛,为测试流程带来了革命性的变化。本文将探讨AI如何优化测试用例生成、提高缺陷检测效率和预测潜在问题,从而显著提升软件测试的效率和准确性。
30 3
|
8天前
|
关系型数据库 MySQL 测试技术
技术分享:深入C++时间操作函数的应用与实践
技术分享:深入C++时间操作函数的应用与实践
12 1
|
12天前
|
敏捷开发 测试技术 持续交付
探索式测试在软件质量保证中的角色与实践
【6月更文挑战第18天】探索式测试,一种灵活且高效的软件测试方法,正逐渐改变传统测试流程的面貌。本文将深入探讨探索式测试的核心概念、实施策略及其在现代软件开发生命周期中的应用价值。通过案例分析与实证研究,揭示探索式测试如何提升测试覆盖率,增强团队协作,并促进持续集成与交付。最终,文章旨在为读者提供一套实用的探索式测试框架,以支持其在软件质量保证活动中的有效运用。
11 3