软件测试是评估软件产品质量和降低软件在运行过程中出现失效风险的一种手段。根据ISTQB软件测试专业术语对照表中对“测试”的定义:包括了所有生命周期活动的过程,包括静态测试和动态测试。涉及到计划、准备和对软件及其相关工作产品的评估,以发现缺陷来判定软件或软件的工作产品是否满足特定需求,证明它们是否符合目标。我将从下面几个方面谈谈我对软件测试的理解:
1、贯穿全生命周期的测试过程
2、输出的工作产品都是测试对象
3、测试除了验证VER还有确认VAR
4、测试不仅仅是发现缺陷
1、贯穿全生命周期的测试过程
对软件测试的常见误解是:它只包含了测试的运行或执行以评估被测对象,即我们通常讲的动态测试。但是,实践过程中我们除了需要考虑动态测试,还应该包括不涉及运行被测对象的过程,即静态测试,例如:评审需求文档。因此,软件测试应该是贯穿于整个软件开发生命周期的过程,即包括静态测试和动态测试。从更详细的角度分析,测试过程有多个测试阶段组成,例如:测试计划与监控、测试分析、测试设计、测试实施、测试执行、测试结束活动等。
随着对软件产品质量和测试要求的不断提高,测试的不断左移和尽早介入也变得越来越重要,同时更加强调测试与开发的并行,这些要求都需要通过在测试过程中定义合适的测试阶段和测试活动来得到满足,通过过程质量来保证输出产品的质量。
2、输出的工作产品都是测试对象
由于强调的是全生命周期的测试,因此测试的对象也不仅仅是代码,或者有代码组成的系统,其测试对象也延伸到了整个软件开发生命周期。假如以典型的V模型为例,左边的开发活动会输出各种软件工作产品,例如:需求说明、架构说明、详细说明和具体代码等,而右边的测试活动同样会输出各种测试工作产品,例如:测试计划、测试设计说明、测试用例说明等。假如需要,V模型输出的各种软件和测试工作产品,都可以作为静态测试的对象。而以代码为核心组成的被测组件或系统,是动态测试的对象。
测试人员尽早参与软件工作产品的静态测试,例如:评审,不仅可以尽早发现缺陷,同时尽早修复早期发现的缺陷,有助于后续过程的缺陷预防。同时,通过静态测试发现的缺陷和其他信息(例如:缺陷的集群效应),可以指导后续的动态测试,例如:重点选择和测试执行先后顺序。
3、测试除了验证VER还有确认VAR
测试过程中,我们有时候我们还会碰到场景:被测对象已经完全实现了需求说明中的每条需求。测试过程中发现的问题,没有在需求中要求,有些测试人员就认为者不是被测对象的问题,因为需求没有规定。此时,我们又会碰到一个问题:测试是否仅仅只是验证需求?
不管是CMMI还是ISTQB,对测试的定义都将测试的内涵进行了扩展,即测试除了验证Verification,还要包括确认Validation。根据ISTQB术语定义:
验证VER:通过检查和提供客观证据来证实指定的需求是否已经满足。[ISO 9000][GBT 11457]。
确认VAL:通过检查和提供客观证据来证实特定目的功能或应用已经实现。一般由终端用户完成。[ISO 9000][GBT 11457]。
我们可以将验证VER简单理解为关注在过程;而确认VAL理解为关注在结果。验证VER和确认VAL对测试人员又提出了更高的要求。作为测试人员,需要站在不同利益干系人的角度看待测试工作。同时,不管是针对静态测试,还是动态测试,或者测试的对象不管是什么软件工作产品,或测试工作产品,测试人员在任务开展过程中都应该同时带有验证VER和确认VAL的思维,多角度审视被测对象。
4、测试不仅仅是发现缺陷
测试过程中的验证VER和确认VAL,测试人员会发现被测对象没有实现需求中定义的要求,或者没有满足用户对特定目标的功能要求,即两个角度都会发现缺陷,这应该是作为测试人员中非常有价值的输出:发现缺陷,然后开发人员对缺陷进行定位和修复,测试人员等缺陷修复之后进行再测试和回归测试。假如缺陷得到了成功修复和后续的测试,则被测对象的质量会不断得到提高。
那么,除了发现缺陷这个目标之外,测试人员通过有效和高效地测试,还能够提供哪些有价值的目标?测试人员至少还需要考虑:
1)增加信心:例如,通过测试确保被测对象可以正常工作,即同时满足需求要求和客户要求,或者满足合同、法律法规要求或标准要求;
2)提供信息:例如,通过测试提供的信息,评估被测对象的质量、测试执行进度进而整个软件项目的进度,同时提供的信息也可以帮助干系人做出合理的决策;
3)预防缺陷:例如:通过在开发生命周期的早期发现缺陷,对于后续阶段而言可以起到预防缺陷的作用;另外,通过测试过程中发现的缺陷,或用户现场发现的缺陷,分析其根本原因,从而预防同样的缺陷不会在开发过程和测试过程中重复出现;
通过测试发现缺陷、增加信心、提供信息和预防缺陷的目标,都有助于降低软件产品的风险,不管是质量风险还是管理风险。同时,开发过程和测试过程的不同阶段,其测试目标会有所不同,以及测试目标通常不是孤立的,而是在测试过程中结合使用。
总结一下,基于ISTQB定义的测试概念,要求我们测试人员将测试活动贯穿于整个软件开发生命周期,其输出的工作产品都应该是我们测试的对象,同时在测试时分别从验证VER和确认VAL两个维度审视被测对象,并且在不同角度评估测试是否达到了不同的测试目标。