L2-13定义实用的测试性能指标

建立和部署一套面向测试目标的测试过程性能指标,以测量测试过程的质量,同时也包括了测试性能指标相关的数据收集、存储和分析的规程。也就是说定义测试过程性能指标,必定与度量相关。这里简单讲解与度量相关的一些内容。关于度量的详细信息,将会在TMMi 4级(测量级)展开。本文主要包括:

1、度量的定义

2、度量过程模型

3、测试度量指标

4、GQM的应用

一、度量的定义

关于度量的定义,大家经常会发现与之对应的几个英文单词“metric”、“measure”和“measurement”。不管是在ISO/IEC15939-2007,还是在ISO 9126标准中,它们的定义都是所有不同。在本文中,结合了标准中的一些定义,以及我自己的一些理解,分别使用“metric”和“measurement”两个词语代表“度量”和“测度”的含义,从测试的角度分别将其意思理解为:

1)度量Metric:是对被测对象属性的量化表示,即关注在量化结果;

2)测度Measurement:是对被测对象属性的量化过程,即关注在量化的过程;

在测试实践中,测试人员应该将重点转移到这些术语背后对应的内容和活动上,理解其后面的东西,术语本身就可以自然得到澄清。关于度量相关的其他一些概念,可以参考标准ISO 15939-2007度量信息模型,其结构框架如下所示:

二、度量过程模型

关于度量的过程描述,也来自标准ISO 15939-2007,其将度量过程分为4个主要的阶段,分别是:建立和维护度量承诺、制订度量计划、实施度量和评估度量。从测试的角度,测试度量可以作为一个工具融合在整个测试过程中,测试度量的需求、度量计划中需要的信息等都来自测试过程。测试过程中不断积累的经验库有利于测试度量的计划和实施,而测试度量活动的评估结果可以对经验库不断进行更新。

三、测试度量指标

测试度量的获取,不仅有助于测试计划的制订(例如:估算和预测),也有助于测试过程监控和过程改进。测试度量指标有很多,来自不同的模型或标准,例如:CMMI(能力成熟度模型集成)和PSM(使用软件和系统度量)都提供了很多的分类和具体指标。

但是,在开展度量时,经常会采用自下而上的构建过程,即测试过程中会收集各种数据形成度量,例如:缺陷密度、测试用例执行率、测试覆盖率等。在思考和选择测试度量时,你会发现这些指标往往杂乱无章,甚至有些基本都是不需要的。选择测试度量的问题,往往不是度量指标不够,而是太多。

四、GQM的应用

选择度量更好的一种的方式是自上而下的形式展开,必须以度量目标和模型为基础,这就是GQM(目标、问题和度量模型)的由来。其过程由4个阶段组成:计划阶段、定义阶段、收集数据阶段和解释阶段。其核心的活动包括:

1)制订一系列目标Goal;

2)设定一些描述目标的问题Question;

3)定义需要回答这些问题的度量标准Metric;

4)开发收据收集和分析的机制;

5)收集、确认和分析数据,并采取合适的行动;

6)评估度量数据是否与目标一致,并为其后的改进提供建议;

7)为利益干系人提供反馈信息;

GQM的模型的核心在于目标驱动,起源于度量目标,将其目标分解成多个相关的问题,然后每个问题和一系列的度量指标相对应。同样的度量指标可能在回答多个问题时用到。其结构图如下所示:

因此,在定义测试性能指标时,建议以GQM模型为基础,自上而下的方式定义和选择度量指标。同时可以参考CMMI和PSM中已经提供的度量类型和指标,目的是为了更好的评估测试过程的效率和有效性、被测对象的质量、评估测试充分性和测试进度、监控测试过程等。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,340评论 5 467
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,762评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,329评论 0 329
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,678评论 1 270
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,583评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 47,995评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,493评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,145评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,293评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,250评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,267评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,973评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,556评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,648评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,873评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,257评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,809评论 2 339

推荐阅读更多精彩内容