自动化测试 - 重复执行测试

在功能测试过程中,经常会遇到一些偶然出现的 Bug,所以我们需要通过重复执行用例来复现问题,但前提是,当前自动化脚本是独立的,不依赖任何其他脚本。可以针对单个用例,或者针对某个模块的用例重复执行多次来复现。

安装插件

全局安装:即安装在全局环境中,新创建的工程导入全局环境时会将该包导入,cmd 输入:pip install pytest-repeat。

局部安装:即安装在当前项目的环境下,新创建的工程不会同步该包,在 PyCharm→File→setting,搜索 pytest intrepreter,点击 “+” 号,如下图所示:

image.png
image.png

pytest-repeat(重复执行单条或全部测试用例)

注意: pytest-repeat不能与unittest.TestCase测试类一起使用。无论--count设置多少,这些测试始终仅运行一次,并显示警告。

方法一:使用注解方式,实现重复执行单条用例

注:在测试用例前添加注解@pytest.mark.repeat(value),value 表示重复的次数,来实现单条用例的重复执行。

import pytest

@pytest.mark.repeat(1)
def test_01():
    print("测试用例test_01")

@pytest.mark.repeat(2)
def test_02():
    print("测试用例test_02")


@pytest.mark.repeat(3)
def test_03():
    print("测试用例test_03")


if __name__ == '__main__':
    pytest.main(['-s', 'Test_Pytest.py'])

执行效果如下:

image.png

方法二:使用命令行参数,实现重复执行所有用例
import pytest

class Test_Pytest:

    def test_one(self):
      print("test_one方法执行")

    def test_two(self):
      print("test_two方法执行")

if __name__ == '__main__':
    pytest.main(['-s', 'Test_Pytest.py'])

在终端输入:

pytest -s -v --count=2 Test_Pytest.py

注:
-s:表示输出用例中的调式信息,比如 print 的打印信息等。

-v:表示输出用例更加详细的执行信息,比如用例所在的文件及用例名称等。

执行效果如下:

image.png

repeat-scope的使用

作用:可以覆盖默认的测试用例执行顺序,类似fixture的scope参数

import pytest

class Test_Pytest:

    def test_one(self):
      print("test_one方法执行")

    def test_two(self):
      print("test_two方法执行")

if __name__ == '__main__':
    pytest.main(['-s', 'Test_Pytest.py'])

在终端输入:

pytest -s --count=2 --repeat-scope=class Test_Pytest.py

命令行参数
function:默认,范围针对每个用例重复执行,再执行下一个用例
class:以class为用例集合单位,重复执行class里面的用例,再执行下一个
module:以模块为单位,重复执行模块里面的用例,再执行下一个
session:重复整个测试会话,即所有测试用例的执行一次,然后再执行第二次

执行效果如下:

image.png

pytest-rerunfailures(测试用例执行失败后重运行)

方法一:通过注解的形式实现失败重运行

import pytest

class Test_Failure:
     # 用例失败后重新运行2次,重运行之间的间隔时间为10s
    @pytest.mark.flaky(reruns=2, reruns_delay=10)
    def test_one(self):
      a = 1 + 2
      assert 1 == a

    def test_two(self):
      a = 1 + 2
      assert 3 == a


if __name__ == '__main__':
    pytest.main(['-s', 'Test_Failure.py'])

注:
reruns: 表示重运行的次数
reruns_delay: 表示重运行次数之间的延迟时间,单位:秒

执行结果如下:

image.png

方法二:通过使用命令行参数,实现失败重运行

import pytest

class Test_Failure:

    def test_one(self):
      a = 1 + 2
      assert 1 == a

    def test_two(self):
      a = 1 + 2
      assert 3 == a


if __name__ == '__main__':
    pytest.main(['-s', 'Test_Failure.py'])

在终端输入:

pytest -s -v --reruns=2 --reruns-delay=10 Test_Failure.py

执行结果如下:

截屏2022-03-14 上午12.26.09.png

pytest 的 -x 选项与 pytest-repeat 结合(重复执行测试用例直到失败停止)

将 pytest 的 -x 选项与 pytest-repeat 结合使用,可以实现在重复运行测试用例的过程中,测试用例第一次失败时就停止运行,具体实现方法如下:

import pytest

class Test_Failure:
  
    def test_one(self):
      a = 1 + 2
      assert 1 == a

    def test_two(self):
      a = 1 + 2
      assert 3 == a


if __name__ == '__main__':
    pytest.main(['-s', 'Test_Failure.py'])

在终端输入:

pytest -s -v --count=3 -x Test_Failure.py

执行结果如下:

截屏2022-03-14 上午12.49.02.png

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,651评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,468评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,931评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,218评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,234评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,198评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,084评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,926评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,341评论 1 311
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,563评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,731评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,430评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,036评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,676评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,829评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,743评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,629评论 2 354

推荐阅读更多精彩内容