软件测试系列---缺陷管理
一、软件缺陷的基本概念
1、软件缺陷的基本概念主要分为:缺陷、故障、失效这三种。
(1)缺陷(defect):存在于软件之中的偏差,可被激活,以静态的形式存在于软件内部,相当于bug;
(2)故障(Fault):软件运行中出现的状态,可引起意外情况,若不加处理,可产生失效,是一个动态行为;
(3)失效(Failure):软件运行时产生的外部异常行为结果,表现与用户需求不一致,功能能力终止,用户无法完成所需要的应用。
二、软件缺陷的三个基本概念的相互关系
1、bug一定会被激活吗?激活后一定表现为故障吗?
答案是不一定,任何一个软件即便测试的非常严格,在发布后也会存在遗漏的bug,但是这些bug在用户使用的时候不一定会被激活,因为有些bug隐藏的比较深,用户在使用的过程中不可能触发这些bug,所以这些bug一直隐藏在软件内部,没有被激活,也就是说即使软件内部有bug,软件也可以正常运行,但也有可能,在某些情况下,这些bug会被激活,表现为故障*。
2、故障一定会导致失效吗?
答案也是不一定,开发人员在做设计的时候,更多的考虑了在软件使用期间可能出现的故障,然后针对这些故障采取的一些预防的措施,比如:数据库会出现的数据丢失的问题,为了避免这种失效的出现,产品开发人员在做设计的时候,也许会采取数据库时时备份的方式,也就是在本地有一个数据库,在异地也有一个数据库,这个地方的数据库会实现时时的备份,当其中一个数据库出现了异常,那另外一个数据库还可以启动工作,所以说,缺陷不一定会导致故障,故障不一定会导致失效。
三、软件缺陷报告单
缺陷报告单是任何缺陷修改的一个起始,也就是我们测试人员在进行测试执行的时候,发现了一个缺陷,发现缺陷后,我们不要口头和开发人员交流,因为口头的交流不仅没有任何的约束力,而且有可能表达不清楚,所以我们要把缺陷落实在纸面上,也就是要测试人员填写缺陷报告单。
缺陷报告单的作用:
1、测试执行过程中,发现缺陷失效后(不一定是失效,也许是故障,一般来说这个缺陷在测试阶段被发现往往表现为产品失效),提出书面的报告,提供给开发人员作为定位缺陷的依据,也作为日后缺陷度量的数据依据,开发人员接到缺陷报告单后,他会根据缺陷报告单上描述的缺陷外在表现来重现这个问题,然后找出这个问题,也就是缺陷产生的根源。
2、缺陷报告还可以作为我们日后缺陷度量的数据依据,度量是对整个产品进行考核,比如说,我们的软件在什么时候可以发布,什么时候可以交付给客户等等问题,这个时候我们往往从缺陷度量的数据来看,比如我们子啊最后一轮进行测试的过程中,每千行代码只有0.1个缺陷,说明我们产品的质量已经非常高了,而且遗留的缺陷也就非常少了,这个时候就可以发布产品了,所以这个缺陷的统计数据时非常重要的,它可以作为缺陷度量的依据。
四、软件缺陷管理的目的
缺陷管理的目的是:对各个阶段测试发现的缺陷进行跟踪管理,以保证各级缺陷的修复率达到标准,主要实现以下目标:
(1)保证信息的一致性;
(2)保证缺陷得到有效的跟踪,缩短沟通时间,解决问题更高效;
(3)收集缺陷数据并进行数据分析,作为缺陷度量的依据。
五、软件缺陷管理工具
软件缺陷管理的流程一定要有相关的软件进行支撑,否则软件缺陷管理的流程是无法正常运行的,就类似于我们在做开发的过程中,开发JAVA相关的程序我们就需要JBOSS这样的工具,,如果我们开发C++就需要Visual C++工具,在软件缺陷跟踪中我们也需要一些工具,比如商用工具Mercury Quality Center是目前非常强大的软件测试管理工具,它的功能包括业务管理、测试用例的管理、缺陷的分析及测试脚本的管理,所有缺陷仅仅是其一个点;Rational ClearQuest它主要用于变更控制和缺陷管理这一块,此外还有Bugzilla,Mantis,Jira三个开源工具。
使用商用的软件缺陷管理工具或软件测试工具,好处是由商家提供一系列支持、工具的相关制定以及后期的升级服务,所以商用软件缺陷管理工具从整体的易用性和可用性来看,要比开源工具好得多,开源工具最大的好处就是便宜,不用去花钱购买,但是易用性和可用性相对来说就弱一些。
六、软件缺陷管理的相关角色
软件开发和软件测试的任何一个流程,都应该有流程的入口,流程的出口,还有流程的具体过程以及参与到这些过程中的相关角色。
在软件跟踪的流程当中,有以下几类角色:
(1)软件开发人员;
(2)软件测试人员;
(3)软件测试项目经理;
(4)软件开发项目经理;
(5)CCB(Change Control Board):变更控制委员会。所谓的变更控制委员会,他是在开发人员和测试人员对缺陷出现争议的时候,做出最后的裁判;
(6)配置管理员:就是测试人员提交BUG,开发人员修改,修改完check in ,那么在check in这个过程中需要配置管理员参与进来,只有经过配置管理员授权,开发人员才有资格把代码从本地Check in到服务器中去,所以配置管理员在软件缺陷管理中也很重要。
一、软件缺陷报告的内容
1、Bug Title/Summary:缺陷标题/简单描述建议问题的软件缺陷(Enhancemental):由问题提出人对测试对象的改进意见或测试人员提出的建议、质疑。
属性5、缺陷的优先级(Priority)
站在 开发/项目 的角度,综合权衡修改bug的时间、成本、技术和风险,决定bug修改的先后顺序。
优先级每个公司都有自己的标准,例如某公司的标准为:
P0:必须当天修改,8小时内修改;(优先级最高的)
P1:1~2内修改;
P2:2~4天内;
P3:一周内;
P4:发布周期内或者不修改。
属性6、缺陷的类型
1、质量特性的角度
(1)功能;(2)性能;(3)安全性;(4)易用性;(5)可靠性。
2、功能性角度
(1)错误(Error);(2)遗漏(Missing);(3)多余的(Extra);(4)可优化(Improvement /Enhancement /suggestion)
3、缺陷产生的原因:
(1)需求不清晰,导致设计目标偏离客户端需求,从而引起功能或产品特征上的缺陷;
(2)对程序逻辑路径或数据范围的边界考虑不够周全,漏掉某些边界条件,造成容量或边界错误;
(3)新技术的应用,可能涉及技术或系统兼容的问题,事先没有考虑到;
(4)可能由于不支持字符集,而导致的乱码。
等等的一些原因。
属性7、缺陷所属版本
在软件开发测试的过程中,版本的管理是非常重要的,也就属于配置管理的范畴,测试人员开始测试的时候肯定从配置库里面提取最新的版本;
比如说1.0版本,那么测试完成之后,把问题提交给开发人员,开发人员对1.0版本的源代码进行修改,那么这个修改完之后的版本肯定是1.0的下一个版本,也就是1.1版本,修改完之后测试人员要进行回归测试,这个时候测试人员进行回归测试的版本一定是最新版本,即1.1版本。
细分的话,缺陷所属版本还应该有三个属性:(1)发现缺陷的版本;(2)修改bug的版本;(3)回归测试的版本。
所以说,只有缺陷所属版本在开发过程中规定明确落实下来,我们的产品质量才能有保证,不会造成开发和测试的混乱。
属性8、缺陷修改日期
最后一个缺陷的属性是缺陷修改日期,是主要对开发人员进行考核的参数,比如测试人员在3月份提交了一个测试报告单,开发人员在12月份才修改这个问题,由此可见,开发人员修改这个问题的响应时间太长。所以缺陷修改日期往往可以作为绩效考核或者其他的一些数据统计的基础。
三、范例:优秀的缺陷跟踪单
对WPS或者OFFICE进行测试时,发现错误。
简单描述:
--Arial 、Wingdings 和 Symbol字体会破坏新文体。
详细描述:
--软件测试环境为Windows 2000 sp4
--启动WordEdit编辑器,然后创建新文件;
--输入四行文本,重复输入”welcome to shanghai university“
--选中这四行文本,然后选择下拉菜单,并选择Arial字体;
--所有文本被转换成控制字符、数字、和其他明显的随机二进制数据;
--重复三次,结果都一样。
相关附件
--附件1:变换格式之前的文档;
--附件2:变换格式之后的文档;
软件缺陷初步分析:
--可能是格式问题,保存文件,关闭WordEdit并重新打开文件,但是数据依然被破坏;
--在改变字体前保存文件防止错误;(建议性的)
--对现存文件进行上述错误,错误不再发生;
--只在Windows 2000下发生,而不出现在Solaris、Mac和其他Windows系统。