L2-13定义实用的测试性能指标

建立和部署一套面向测试目标的测试过程性能指标,以测量测试过程的质量,同时也包括了测试性能指标相关的数据收集、存储和分析的规程。也就是说定义测试过程性能指标,必定与度量相关。这里简单讲解与度量相关的一些内容。关于度量的详细信息,将会在TMMi 4级(测量级)展开。本文主要包括:

1、度量的定义

2、度量过程模型

3、测试度量指标

4、GQM的应用

一、度量的定义

关于度量的定义,大家经常会发现与之对应的几个英文单词“metric”、“measure”和“measurement”。不管是在ISO/IEC15939-2007,还是在ISO 9126标准中,它们的定义都是所有不同。在本文中,结合了标准中的一些定义,以及我自己的一些理解,分别使用“metric”和“measurement”两个词语代表“度量”和“测度”的含义,从测试的角度分别将其意思理解为:

1)度量Metric:是对被测对象属性的量化表示,即关注在量化结果;

2)测度Measurement:是对被测对象属性的量化过程,即关注在量化的过程;

在测试实践中,测试人员应该将重点转移到这些术语背后对应的内容和活动上,理解其后面的东西,术语本身就可以自然得到澄清。关于度量相关的其他一些概念,可以参考标准ISO 15939-2007度量信息模型,其结构框架如下所示:

二、度量过程模型

关于度量的过程描述,也来自标准ISO 15939-2007,其将度量过程分为4个主要的阶段,分别是:建立和维护度量承诺、制订度量计划、实施度量和评估度量。从测试的角度,测试度量可以作为一个工具融合在整个测试过程中,测试度量的需求、度量计划中需要的信息等都来自测试过程。测试过程中不断积累的经验库有利于测试度量的计划和实施,而测试度量活动的评估结果可以对经验库不断进行更新。

三、测试度量指标

测试度量的获取,不仅有助于测试计划的制订(例如:估算和预测),也有助于测试过程监控和过程改进。测试度量指标有很多,来自不同的模型或标准,例如:CMMI(能力成熟度模型集成)和PSM(使用软件和系统度量)都提供了很多的分类和具体指标。

但是,在开展度量时,经常会采用自下而上的构建过程,即测试过程中会收集各种数据形成度量,例如:缺陷密度、测试用例执行率、测试覆盖率等。在思考和选择测试度量时,你会发现这些指标往往杂乱无章,甚至有些基本都是不需要的。选择测试度量的问题,往往不是度量指标不够,而是太多。

四、GQM的应用

选择度量更好的一种的方式是自上而下的形式展开,必须以度量目标和模型为基础,这就是GQM(目标、问题和度量模型)的由来。其过程由4个阶段组成:计划阶段、定义阶段、收集数据阶段和解释阶段。其核心的活动包括:

1)制订一系列目标Goal;

2)设定一些描述目标的问题Question;

3)定义需要回答这些问题的度量标准Metric;

4)开发收据收集和分析的机制;

5)收集、确认和分析数据,并采取合适的行动;

6)评估度量数据是否与目标一致,并为其后的改进提供建议;

7)为利益干系人提供反馈信息;

GQM的模型的核心在于目标驱动,起源于度量目标,将其目标分解成多个相关的问题,然后每个问题和一系列的度量指标相对应。同样的度量指标可能在回答多个问题时用到。其结构图如下所示:

因此,在定义测试性能指标时,建议以GQM模型为基础,自上而下的方式定义和选择度量指标。同时可以参考CMMI和PSM中已经提供的度量类型和指标,目的是为了更好的评估测试过程的效率和有效性、被测对象的质量、评估测试充分性和测试进度、监控测试过程等。

你可能感兴趣的:(L2-13定义实用的测试性能指标)