平台测试策略

最近平台化是一个很火的词,都在讲什么什么的平台化,基于这种平台化应该怎么去制定测试策略呢,这是很值得我们去思考的一个问题。

系统的背景

最近就在做一个基于SAP的平台化项目,项目背景如下,客户的后台是一个大的SAP系统,我们需要基于这个SAP系统去做平台化。

由于SAP本身提供很多服务,客户能基于SAP去查询很多相关的数据,但是痛点在于,当客户需要去相关的一系列信息的时候,往往要登录不同的系统,做很多查询,最后才能查出想要的答案。我们的目的在基于当前SAP存在的功能,进一步做整合,能够更加方便快捷的为用户提供服务。

所以整体的系统结构为:

1. SAP系统,此系统为用户第三方提供的系统

2. Platform,这个是我们需要去做的系统,目的是为了整合SAP所提供的服务,是一个基于微服务的系统。

3. BFF,调用platform的微服务,为前端的页面提供服务。

4. Web application,显示给用户的页面。

在开发过程中,我们需要从上游拉动下游进行开发---从客户那里获得想要的需求,然后去拉动platform和SAP的开发。对这个系统我们需要怎样去做测试呢?

需要考虑的点

其实对于测试策略的制定来说,我们需要关注的点基本都是互通的,比如Responsibility,Automation,Data Management,Test Management,以及risk management等等。

关于测试类型

相信大家对UI automation,API,以及单元测试和code扫描测试都已经很熟悉了,这里我想重点说下的是SAP Regression。这个实际上有客户提供的SAP的回归测试,我们会把相应的这些测试放到pipline里面,当我们修改了SAP的某些功能的时候,我们就需要去运行SAP的回归测试,确保我们的修改不会影响SAP本身的功能。

image

具体的测试类型用到什么样的测试框架,都是与技术栈强相关的:

1. Unit test会针对前后端分别用到 Junit (backend)和Karma, Jasmine (frontend)。

2. API测试因为指在BFF层面有(其他的有契约测试覆盖),而BFF本很是用java编写的,所以我们选择了RestAssured。

3. 前端用的是Angular js的技术栈,所以我们选择了Nighwatch,其实对于前端来说,如果是angularjs,Protractor也是另外一个好的选择。

4. SAP的回归测试,由于是客户提供的,客户用的是newman,我们直接把脚本集成到pipline里面就好了。

最后我们整理如下图:

image

除了这些,我们还同时用到了契约测试和mock,为什么会用到契约测试和mock呢?

关于契约测试和mock

对月契约测试来说,我相信大家已经很熟悉了,主要是用于微服务之间以及,bff与platform之间。对我们为什么选择mock测试原因,可以参照我另外一篇文章: 江湖郎中,你还要吗?

测试计划

我们需要为我们项目制定测试计划,如下图,第一个迭代和第二个迭代与开发同步,主要用户测试框架的搭建,和准备工作,在第二个迭代的时候开始引入了system integration test的工作。

image

测试环境

与一般的项目一样,我们需要不同的环境,如下:

image

性能测试和安全测试

这也是我们一般所说的非功能性测试,对于性能测试我们定义了一些临时的性能指标,因为有很多不确定性因素,所以这个是要在项目持续进行修正的指标,如下图:

关于安全性测试,我们用到是比较常用的静态代码扫描Fortify用于JS的安全扫描,Lapse用于Java的安全扫描。

image

关于风险

对于这个项目来说,最大的风险就是SAP系统的不确定性,由此引发的考虑是,pipline如何与SAP集成?

1. 客户的SAP测试系统是一个第三方的系统,不仅极不稳定,这些都是短期内很难去和客户协调解决的问题,而且我们只有读的权限,并没有写的权限。导致我们在开发platform的过程中不能很好的和SAP集成,影响开发进度。

2. 当我们做完开发,pipline需要执行所有的测试,其中包括与SAP的集成测试,试想如果SAP不稳定,那么集成测试很多时候都会因为这个失败,怎样去做持续集成?

3. 如果我们能得到稳定的SAP环境,如何创建我们需要的数据呢?

image

对于测试策略来说,我们通常还要考虑到比如cases management,bug分析与管理等,这里就不再累赘。重要的不是在于我们能做什么,而是我们这样做能为项目带来什么样的价值。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,968评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,601评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,220评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,416评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,425评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,144评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,432评论 3 401
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,088评论 0 261
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,586评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,028评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,137评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,783评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,343评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,333评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,559评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,595评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,901评论 2 345

推荐阅读更多精彩内容