如何评估测试的有效性？

测试是软件开发必不可少的一种验证和确认的方法。 我们都希望能够通过测试尽可能地去除掉软件中潜在的缺陷，这样通过测试的软件的质量就是得到保证的。 但是，这样的前提是测试是有效的。 那么怎么样的测试才是有效的测试呢？

下面是几种常用的评价测试有效性的方法。

1. 判断

这是一种主观的意识行为，甚至不需要有数据支持。 评估的人作出有效的评价，可能仅仅是因为做测试的人是值得信任的。 比如，一个非常有经验的测试人员，他以往测试的软件一直都表现出具有很高的质量，这次又没有什么意外情况发生，评估人员就会判断他的这次测试也是有效的。

2. 与方法学一致

如果我们已经建立了一个已经证明有效的标准的软件测试规程，而评估的测试过程是完全基于这一测试规程进行的，那么，我们就可以认为这个测试结果是有效的。

3. 用户满意度

用户就意味着软件质量水平很高，软件水平质量很高则意味着测试是有效的，去除了大部分的软件缺陷。

4. 测试的度量

测试是有效的，那么通过测试的软件就应当已经去除大部分的缺陷，交付使用软件出现问题的概率非常之低。 如果用一个度量指标来说，就是缺陷去除效率。 在《软件工程最佳实践》中，认为高质量的软件的缺陷去除效率超过95%。

要获得缺陷去除效率这样的指标，就需要进行以下测试数据的度量：

• 测试发现的缺陷。 不同测试级别所发现的缺陷数量。

• 每个阶段检测到的缺陷。 从需求分析阶段开始至测试阶段，每个阶段发现的缺陷。

• 测试后发现的缺陷。 测试完成进入生产状态发现的缺陷数量。

• 使用发现的缺陷。 软件交付给用户使用后发现的缺陷。

有效的测试还意味着用合适的资源就完成好测试任务。 所以，度量的测试数据还应包括：

• 软件的特征。 每个软件中发生变更的频率、规模和类型。

• 软件的大小。 规模是用来关联软件测试的一个因素。

• 测试的代价。 测试投入的资源，包括人员和计算机。

要评估测试的有效性，以上4种方法可以混合使用。 我们可以给这4种方法分别赋予一个权值：

• 判断： 权值10%

• 与方法学一致： 权值20%

• 用户满意度： 权值30%

• 测试的度量： 权值40%

每种方法评估测试的有效性都给出一个百分比数值，再乘以各自的权值，最后的结果累加起来就是测试有效性的值。

测试有效性值如果大于90%，我们认为测试是有效的； 测试有效性值如果低于50%，我们就要考虑补充测试。

这正是：

评估测试有效性，四种方法可使用

综合获得有效值，采取措施保质高

作者简介： 王小双，长期从事GJB5000推广、实施、评价、改进的工作，创建《软件工程之思》微信公众号，一直在《软件工程之思》分享GJB5000、CMMI、软件工程的知识和感悟。 现致力于GJB5000咨询以及软件过程改进、软件工程能力提升的研究工作。