概念:测试自动化和工具
该指南讨论了可用于改进测试效率的工具类型。
关系
主要描述

测试自动化工具越来越多的出现在市场上,这些工具可以自动执行测试任务。现有自动化工具虽然很多,但还没有哪一种工具能够自动执行所有测试任务。多数工具是一个特定任务或一组任务专用的,而有些工具只能处理某个任务的一个方面。

评估不同的测试自动化工具时,有必要了解正在评估的工具的类型、工具的限制以及工具能够处理和自动执行的任务。测试工具通常基于以下类别进行评估和获得:

功能

测试工具可以按执行的功能归类。为工具设计的典型功能包括:

  • 数据采集工具,获取在测试任务中使用的数据。可以通过转换、抽取或捕获现有数据或者通过生成用例或补充规范来获取数据。
  • 静态评估工具,分析设计模型、源代码或其他固定源中包含的信息。分析产生关于逻辑流、数据流、质量度量值(如复杂性、可维护性)或代码行的信息。
  • 动态评估工具,在代码执行期间执行分析。该评估包括代码的运行时操作,如内存量、错误检测和性能。
  • 执行任务的模拟程序驱动程序,它们执行由于计时、费用或安全原因而无法用于测试的任务。
  • 测试管理工具,帮助计划、设计、实施、执行、评估和管理测试任务或工作产品。

白匣与黑匣

根据工具的使用方式或使用工具所需的技术和知识,测试工具通常被描绘成白匣或黑匣。

  • 白匣工具,依靠代码、设计模型或其他来源的资料的知识来实施和执行测试。
  • 黑匣工具,只依靠测试目标的用例或功能描述。

白匣工具了解测试目标是如何处理请求的,而黑匣工具依据输入和输出条件来评估测试。

专门化

除了前面提到的工具的广泛分类,还可以按专用性来对这些工具进行分类。

  • 记录和回放工具,将数据采集和动态评估结合起来。在记录事件期间获取测试数据(称为测试实施)。以后,在测试执行期间,将数据用于回放测试脚本,该脚本是用于评估测试目标的执行的。
  • 质量度量值工具是静态评估工具,对设计模型或源代码执行静态分析,以建立一组描述测试目标质量的参数。这些参数可以指示可靠性、复杂度、可维护性或其他质量度量值。
  • 覆盖率监视工具,通过确定在测试期间的某个范围内覆盖了多少测试目标,来指示测试的完整性。覆盖率的典型类包括用例(基于需求的)、逻辑分支或节点(基于代码的)、数据状态和功能点。
  • 测试用例生成器自动生成测试数据。测试用例生成器使用测试目标的数据输入的正式规范或使用设计模型和源代码,来产生测试标定输入、错误输入、限制案例和边界案例的测试数据。
  • 比较器工具将测试结果与参考结果加以比较,并确定区别。 对于特定数据格式,比较器的特征有所不同。例如,若比较位图图像,比较器可能是基于像素的,若是比较对象属性或数据,则比较器可能是基于对象的。
  • 数据抽取器用于从现有来源为测试用例提供输入,来源包括数据库、通信系统中的数据流、报告或设计模型和源代码。