如何用Robot framework来编写优秀的测试用例

本文转自 51testing Murphy_Ma1989.

介绍

这篇文档将会是一篇在「高层面」的怎么用 Robotframework 来编写优秀测试用例的原则。至于如何使用 Robotframework 来与您的待测试系统相作用这样的细节讨论是不包含在这篇文档中的。


最重要的一条原则就是保证测试用例对于不熟悉这个领域的人来讲越简单越好.


关于这个主题的更多信息,你可以查看以下这些优秀的资源:

Writing Maintainable Automated Acceptance Tests 作者:Dale H. Emery」
How to Structure a Scalable And Maintainable Acceptance TestSuite 作者:Andreas Ebbert-Karroum

命名

1. 测试套件的命名

  • 套件的名称应该尽可能地描述这个套件的用途。
  • 名称可以相对长一些,但是如果超过40个字那也太长了一些。
  • 记住 Robotframework 的套件名称是直接从文件/目录的名字转换来的。文件的后缀名被去掉了而且下划线会被转换成空格,如果你的用到的单词都是小写的,那么开头字母会被转换成大写的。比如 login_test.txt 会被转换成 Login Tests, DHCP_and_DNS 会被转换成 DHCP and DNS。

2.测试用例的命名

  • 测试用例的名字应该与套件的名字描述相似。
  • 如果一个套件里包含了好多个相似的测试用例,而且测试套件本身已经很好地命名了,那么用例的名称可以简短一些。
  • 在测试用例文件中的名称应该恰好表达了你需要做什么。

3.关键词命名

  • 同样的,关键词的名称也应该是清晰具体的。
  • 应该可以表达这个关键词干了什么,而不是它如何去做。
  • 关键词应该是非常不同的抽象层次(比如,「输入字符」或者「用户登录到系统」)。

4.生成和分解的命名

  1. 试着用名称来描述这个步骤完成了什么。
  2. 或许你可以用一个已经存在的关键词
  3. 如果生成或者分解包含了不相关的步骤,那么可以接受更抽象一点的名称。
  4. 在名称中列举步骤是一个重复化和维护的问题(比如:登入系统,添加用户,激活警报和检查平衡)。
  5. 或许需要用到一些通用一些的名称比如「初始化系统」
  6. 每个用到这几个测试用例的人都需要明白这几个生成或者分解动作是干什么的。

文档

1. 测试套件的文档

  • 通常把文档添加到包含测试用例的最底层套件中是一个不错的想法。高层的套件不需要那么频繁地文档化。
  • 文档应该包含必要的背景信息,比如为什么要创建这些测试用例,测试环境中需要注意的点等等。
  • 文档内容不要只是简单地重复套件的名称。如果不是真的有文档还不如不添加文档。
  • 文档的内容不要包含关于测试用例的太详细的信息。测试用例本身就应该足够清楚易懂了。重复的信息是一种浪费,而且也不容易维护。
  • 文档中可以添加一些详细内容的链接。
  • 如果你需要在文档中添加一些比如(版本:1.0 或者 OS:Linux这样的「名称-值」组的话,可以考虑使用测试套件 metadata

2. 测试用例的文档

测试用例通常来说不需要文档。套件名称和文档以及用例的名称已经提供了足够的背景信息。
测试用例的结构应该是不需要文档或者其他注释都足够清楚了的。
Tag 通常比文档更灵活,还能提供更多的功能。
当然测试用例的文档是有用的时候,也不要担心而不去添加哟。

3. 用户自定义关键词文档

如果这个关键词非常简单明了的话,不需要文档。好的名称和明确的结构就足以说明一切了。
用户自定义关键词文档的一个重要的用途是用来记录参数和返回值的信息。
在 RIDE(比如在关键词补全的地方)以及在资源文件中显示的文档是由 libdoc.py 生成的。

测试套件的结构

  • 在套件中的用例应该是互相相关的。如果测试用例拥有同样的生成或者分解部分,那么他们应该是属于一个套件的。
  • 除非是数据驱动的,在一个套件中不要放10个以上的测试用例。测试用例应该是独立的。用生成和分解来初始化他们。
  • 有时候如果测试用例之间无法避免地相关联,比如说,它可能是因为把所有的用例独立出来要化太多的时间在初始化上。相关联的测试用例就那么几个(最多4到5个)下一个用例是用来验证上一个用例的结果的。(用${PREV TEST STATUS} 这个变量)

测试用例的结构

测试用例应该是易懂的。一个测试用例只测试一件事情。当然,事情本身可大可小。选择一个合适的抽象层面。一致地使用抽象水平(单一水平的抽象原则),只包含与测试相关的信息。

用例可以分为两种

  1. 工作流程的测试用例
  2. 数据驱动的测试用例

工作流程的测试用例通常来说有以下这些部分:

  • 前置条件(可选,通常在生成部分)
  • 动作 (对被测系统执行一些动作)
  • 验证 (必须有一个验证的部分!)
  • 清理 (可选,通常在分解部分,以保证用例已经执行完毕)。

关键词是用来描述这个用例做了什么:

  • 用清晰的关键词名称和合适的抽象层次。
  • 应该包含足够的信息使得手动执行可以启动。
  • 应该从来不需要文档或者沟通来告诉你这个用例在做什么。
  • 不同的用例可以有不同的抽象层次。
  • 详细的功能测试是更精确的。
  • 端到端的测试可以是一个很高的抽象层次。
  • 一个测试用例应该只使用一种抽象层次。
  • 不同的风格
  • 对于底层的详细测试和集成测试用例来讲应该是更关注技术细节。
  • 「可执行定义」来扮演需求。
  • 使用领域中的语言(术语?)。
  • 所有人(包括顾客和产品负责人)都应该可以看明白。
  • 不复杂的逻辑
  • 不用 for 循环或者 if/else 判断结构。
  • 小心给变量赋值。
  • 测试用例不应该看起来像脚本一样难读。
  • 最多10步,越少越好。

数据驱动的测试用例

  • 每个测试用例有一个高层次的关键词。
  • 不同的参数创建不同的测试。
  • 关键词通常包含了与同一个用例文件中工作流程测试用例中描述的流程类似的流程。
  • 推荐使用测试模板功能。
  • 不需要多次地去重复关键词。
  • 在一个用例里去测试更容易去测试多种变化。
  • 如果可能,推荐在列头部命名。
  • 如果真的需要很多测试用例,考虑把他们做成依赖于外部的模型。

用户定义关键词

  • 应该容易让人理解
  • 和工作流程测试用例一样的标准。
  • 不同的抽象层次。
  • 可以包含一些编程逻辑(for 循环,if 判断这些)。特别对于底层的的关键词。
  • 复杂的逻辑应该放在库里而不是用户定义的关键词里。

变量

  • 封装常的或者复杂的值。
  • 从命令行传递信息。
  • 在关键词之间传递信息。

1. 变量的命名

清楚,但是不要太长。可以在变量表格里用注释来说明。

对每个使用场景保持一致:

小写的本地变量只在当前的用例或者关键词中可用。
全局变量或者套件,用例级别的变量需要大写。
空格或者下划线都可以用来分割变量中的词。
推荐在变量表格中也把设置成动态的变量也列出来。
用Set Global/Suite/Test variable关键词来命名变量。
变量的初始值应该可以解释真实的值应该是什么。

2. 传递和返回值

1.通常的方式是通过关键词来返回值,把他们赋给变量,然后传递给其他关键词的参数。清楚易懂地遵循这个方法。看起来像是编程。
2.备选方案是使用Set Test Variable关键词,不需要在测试用例层面上有什么编程风格。要遵循起来比较复杂,很难重用关键词。避免以下这种测试用例层级。

等待

1. 避免使用sleep

Sleep 是非常脆弱的。平均来说,安全的边界值会使得 Sleep很长时间。用包含了一定的动作触发的关键词来替代 Sleep,等待需要有一个超时的值。

2.显示等待:关键词可以用 Wait Until… 来开头

可能的话用内置的关键词Wait Until Keyword Succeeds来包装其他关键词
有时候 Sleeping 是一种最简单的解决方式,请总是小心使用,不要在经常用到的自定义关键词或者其他关键词中用 Sleeping。在 Debugging 的时候 Sleeping 用来暂停测试执行还是很有用的。虽然 DialogsLibrary 通常更适合用来干这个。

3.隐式等待implicitly

Set Selenium Implicit Wait
隐式等待指定搜索元素时Selenium等待多长时间的最长时间

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,948评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,371评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,490评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,521评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,627评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,842评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,997评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,741评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,203评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,534评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,673评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,339评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,955评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,770评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,000评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,394评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,562评论 2 349

推荐阅读更多精彩内容