Web测试实践
VII. Web测试实践
Web测试对象
- Web的页面元素
页面部分
- 页面清单是否完整
- 页面在不同的分辨率和不同的浏览器版本是否显示
- 页面在不同大小的窗口中的显示是否正确、美观
- 页面特殊效果是否显示：如特殊字体效果、动画效果
- 页面特殊效果显示是否正确
- 每个页面都有相应的Title，不能为空，或者显示“无标题页”
页面元素部分
- 页面元素清单是否全部列出：如按钮、单选框、复选框、列表框、超连接、输入框等等
- 元素是否存在，是否显示
- 页面元素是否显示正确，如文字、图形、签章等
- 页面元素的外形、摆放位置
- 页面元素基本功能是否实现
- 页面元素的容错性是否存在，是否正确
链接测试
主要是保证链接的可用性和正确性，它也是网站测试中比较重要的一个方面。可以使用特定的工具如XENU来进行链接测试。
- 导航测试：导航菜单的描述与导航的链接是否一致，是否有效，如果是相同的页头导航，每个页面都需要测试。
- 图形测试：每个图形的描述与链接是否一致，是否有效，尤其注意幻灯片的链接测试。
- URL链接检查：在地址栏直接输入各个功能页面的URL地址，看系统如何处理，是否有效
- Web的业务逻辑
输入测试
字符型输入框：
- 字符检查：英文全角、英文半角、数字、空或者空格、特殊字符“~！@#￥%……&*？[]{}”特别要注意单引号和&符号。禁止直接输入特殊字符时，使用“粘贴、拷贝”功能尝试输入。
- 长度检查：最小长度、最大长度、最小长度-1、最大长度+1、输入超工字符比如把整个文章拷贝过去。
- 空格检查：输入的字符间有空格、字符前有空格、字符后有空格、字符前后有空格。
- 多行文本框输入：允许回车换行、保存后再显示能够保存输入的格式、仅输入回车换行，检查能否正确保存。若能，检查保存结果，若不能，查看是否有正常提示。
- 安全性检查：输入特殊字符串（
null,NULL,,javascript,<script>,</script>,<title>,<html>,<td>）、输入脚本函数(<script>alert("abc")</script>)、doucment.write("abc")、<b>hello</b>）
数值型输入框：
- 边界值：最大值、最小值、最大值+1、最小值-1
- 位数：最小位数、最大位数、最小位数-1最大位数+1、输入超长值、输入整数
- 异常值、特殊字符：输入空白（NULL）、空格或
"~!@#$%^&*()_+{}|[]\:"<>?;',./?;:'-=等可能导致系统错误的字符、禁止直接输入特殊字符时，尝试使用“粘贴、拷贝”查看是否能正常提交。将Word里面的特殊字符通过剪贴板拷贝到输入框，分页符，分节符类似公式的上下标等、数值的特殊符号如∑，㏒，㏑，∏，+，-等 - 输入负整数、负小数、分数、输入字母或汉字、小数（小数前0点舍去的情况，多个小数点的情况）、首位为0的数字如01、02、科学计数法是否支持1.0E2、全角数字与半角数字、数字与字母混合、16进制，8进制数值、货币型输入（允许小数点后面几位）、
日期型输入框：
- 合法性检查：(输入0日、1日、32日)、月输入[1、3、5、7、8、10、12]、日输入[31]、月输入[4、6、9、11]、日输入[30][31]、输入非闰年，月输入[2]，日期输入[28、29]、输入闰年，月输入[2]、日期输入[29、30]、月输入[0、1、12、13]
- 异常值、特殊字符：输入空白或NULL、输入~！@#￥%……&*（）{}[]等可能导致系统错误的字符
- 安全性检查：不能直接输入，就copy，是否数据检验出错？
搜索功能
功能实现：
- 如果支持模糊查询，搜索名称中任意一个字符是否能搜索到
- 比较长的名称是否能查到
- 输入系统中不存在的与之匹配的条件
- 用户进行查询操作时，一般情况是不进行查询条件的清空，除非需求特殊说明。
组合测试：
- 不同查询条件之间来回选择，是否出现页面错误（单选框和多选框最容易出错）
- 测试多个查询条件时，要注意查询条件的组合测试，可能不同组合的测试会报错。
表单测试
普通表单：
- 特殊键：是否支持Tab键，是否支持回车键，PageUp和PageDown等
- 提示信息：
- 不符合要求的地方是否有错误提示，
- 不选择任何信息，直接点击删除按钮，是否有提示
- 唯一性：字段唯一的，是否可以重复添加，添加后是否能修改为已存在的字段（字段包括区分大小写以及在输入的内容前后输入空格，保存后，数据是否真的插入到数据库中，注意保存后数据的正确性）
- 数据增加正确性：
- 对编辑页的每个编辑项进行修改，点击保存，是否可以保存成功，检查想关联的数据是否得到更新。
- 进行必填项检查（即是否给出提示以及提示后是否依然把数据存到数据库中；是否提示后出现页码错乱等）
- 是否能够连续添加（针对特殊情况）
- 在编辑的时候，注意编辑项的长度限制，有时在添加的时候有，在编辑的时候却没有（注意要添加和修改规则是否一致）
- 对于有图片上传功能的编辑框，若不上传图片，查看编辑页面时是否显示有默认的图片，若上传图片，查看是否显示为上传图片
- 修改后增加数据后，特别要注意查询页面的数据是否及时更新，特别是在首页时要注意数据的更新。
- 提交数据时，连续多次点击，查看系统会不会连续增加几条相同的数据或报错。
- 若结果列表中没有记录或者没选择某条记录，点击修改按钮，系统会抛异常。
- 数据删除实现：
- 是否能连续删除多个产品
- 当只有一条数据时，是否可以删除成功
- 删除一条数据后，是否可以添加相同的数据
- 如系统支持批量删除，注意删除的信息是否正确，如有全选，注意是否把所有的数据删除
- 删除数据时，要注意相应查询页面的数据是否及时更新
- 如删除的数据与其他业务数据关联，要注意其关联性（如删除部门信息时，部门下游员工，则应该给出提示）
- 如果结果列表中没有记录或没有选择任何一条记录，点击删除按钮系统会报错。
注册模块
- 注册时，设置密码为特殊符号，检查登录时是否会报错
- 注册成功后，页面应该以登录状态跳转到首页或指定页面
- 在注册信息中删除已输入的信息，检查是否可以注册成功
登录功能
- 输入正确的用户名和正确的密码
- 输入正确的用户名和错误的密码
- 输入错误的用户名和正确的密码
- 输入错误的用户名和错误的密码
- 不输入用户名和密码（均为空格）
- 只输入用户名，密码为空
- 用户名为空，只输入密码
- 输入正确的用户名和密码，但是不区分大小写
- 用户名和密码包括特殊字符
- 用户名和密码输入超长值
- 已删除的用户名和密码
- 登录时，当页面刷新或重新输入数据时，验证码是否更新
上传图片测试
- 文件类型正确、大小合适
- 文件类型正确，大小不合适
- 文件类型错误，大小合适
- 文件类型和大小都合适，上传一个正在使用中的图片
- 文件类型大小都合适，手动输入存在的图片地址来上传
- 文件类型和大小都合适，输入不存在的图片地址来上传
- 文件类型和大小都合适，输入图片名称来上传
- 不选择文件直接点击上传，查看是否给出提示
- 连续多次选择不同的文件，查看是否上传最后一次选择的文件
查询结果列表
- 列表、列宽是否合理
- 列表数据太宽有没有提供横向滚动
- 列表的列名有没有与内容对应
- 列表的每列的列名是否描述的清晰
- 列表是否把不必要的列都显示出来
- 点击某列进行排序，是否会报错（点击查看每一页的排序是否正确）
- 双击或单击某列信息，是否会报错
Cookie测试
- 禁用cookie，看程序是否能正常工作
- 检查cookie的expires是否合理
- 检查cookie的值是否加密
- 检查cookie的httponly属性，设置了httponly属性的cookie不能被客户端脚本读取
- 检查cookie的secure属性，设置了secure属性的cookie不能通过http传递.
- Web的数据行为
- 数据初始化是否执行
- 数据初始化是否正确
- 数据处理功能是否执行
- 数据处理功能是否正确
- 数据保存是否执行
- 数据保存是否正确
- 是否对其他功能有影响
- Web的其他行为
可用性测试
根据ISO 9241-11的定义，可用性是指在特定环境下，产品为特定用户用于特定目的时所具有的有效性、效率和主观满意度。
有效性是用户完成特定任务和达成特定目标时所具有的正确和完整程度。
效率是用户完成任务的正确和完成程度与所用资源（如时间）之间的比率。
主观满意度是用户在使用产品过程中所感受到的主观满意和接受程度。
- 风格、样式、颜色是否协调
- 界面布局是否整齐、协调（保证全部显示出来的，尽量不要使用滚动条
- 界面操作、标题描述是否恰当（描述有歧义、注意是否有错别字）
- 操作是否符合人们的常规习惯（有没有把相似的功能的控件放在一起，方便操作）
- 提示界面是否符合规范（不应该显示英文的cancel、ok，应该显示中文的确定等）
- 界面中各个控件是否对齐
- 日期控件是否可编辑
- 日期控件的长度是否合理，以修改时可以把时间全部显示出来为准
- 查询结果列表列宽是否合理、标签描述是否合理
- 查询结果列表太宽没有横向滚动提示
- 对于信息比较长的文本，文本框有没有提供自动竖直滚动条
- 数据录入控件是否方便
- 有没有支持Tab键，键的顺序要有条理，不乱跳
- 有没有提供相关的热键
- 控件的提示语描述是否正确
- 模块调用是否统一，相同的模块是否调用同一个界面
- 用滚动条移动页面时，页面的控件是否显示正常
- 日期的正确格式应该是XXXX-XX-XX或XXXX-XX-XX XX:XX:XX
- 页面是否有多余按钮或标签
- 窗口标题或图标是否与菜单栏的统一
- 窗口的最大化、最小化是否能正确切换
- 对于正常的功能，用户可以不必阅读用户手册就能使用
- 执行风险操作时，有确认、删除等提示吗
- 操作顺序是否合理
- 正确性检查：检查页面上的form, button, table, header, footer,提示信息，还有其他文字拼写，句子的语法等是否正确。
- 系统应该在用户执行错误的操作之前提出警告，提示信息.
- 页面分辨率检查，在各种分辨率浏览系统检查系统界面友好性。
- 合理性检查：做delete, update, add, cancel, back等操作后，查看信息回到的页面是否合理。
- 检查本地化是否通过：英文版不应该有中文信息，英文翻译准确，专业。
兼容性测试
兼容性测试不只是指界面在不同操作系统或浏览器下的兼容，有些功能方面的测试，也要考虑到兼容性，
1、平台测试
市场上有很多不同的操作系统类型，最常见的有Windows、Unix、Macintosh、Linux等。Web应用系统的最终用户究竟使用哪一种操作系统，取决于用户系统的配置。这样，就可能会发生兼容性问题，同一个应用可能在某些操作系统下能正常运行，但在另外的操作系统下可能会运行失败。因此，在Web系统发布之前，需要在各种操作系统下对Web系统进行兼容性测试。
2、浏览器测试
浏览器是Web客户端最核心的构件，来自不同厂商的浏览器对Java，、javascript、 ActiveX、 plug-ins或不同的HTML规格有不同的支持。例如，ActiveX是Microsoft的产品，是为Internet Explorer而设计的，javascript是Netscape的产品，Java是Sun的产品等等。另外，框架和层次结构风格在不同的浏览器中也有不同的显示，甚至根本不显示。不同的浏览器对安全性和Java的设置也不一样。测试浏览器兼容性的一个方法是创建一个兼容性矩阵。在这个矩阵中，测试不同厂商、不同版本的浏览器对某些构件和设置的适应性。
兼容性测试:
步骤:
1.分析被测系统
操作系统版本: Winxpsp3 Vista Win7 Win8 Win8.1 win10 Mac Linux
类型: 32,64
浏览器:IE6 IE8 IE9 IE10 IE11 chrome safari firefox opera
2.测试用例设计
组合测试.
全组合: 829
正交试验法: 正交表
PICT工具: 微软
···shell
pict model_file
···
因子1:值1,值2,...
因子2:值1,值2,...
....
3.搭建测试环境
4.执行测试
PICT工具
性能测试
连接速度测试
用户连接到Web应用系统的速度根据上网方式的变化而变化，他们或许是电话拨号，或是宽带上网。当下载一个程序时，用户可以等较长的时间，但如果仅仅访问一个页面就不会这样。如果Web系统响应时间太长（例如超过5秒钟），用户就会因没有耐心等待而离开。另外，有些页面有超时的限制，如果响应速度太慢，用户可能还没来得及浏览内容，就需要重新登陆了。而且，连接速度太慢，还可能引起数据丢失，使用户得不到真实的页面。负载测试
负载测试是为了测量Web系统在某一负载级别上的性能，以保证Web系统在需求范围内能正常工作。负载级别可以是某个时刻同时访问Web系统的用户数量，也可以是在线数据处理的数量。例如：Web应用系统能允许多少个用户同时在线？如果超过了这个数量，会出现什么现象？Web应用系统能否处理大量用户对同一个页面的请求？压力测试
负载测试应该安排在Web系统发布以后，在实际的网络环境中进行测试。因为一个企业内部员工，特别是项目组人员总是有限的，而一个Web系统能同时处理的请求数量将远远超出这个限度，所以，只有放在Internet上，接受负载测试，其结果才是正确可信的。进行压力测试是指实际破坏一个Web应用系统，测试系统的反映。压力测试是测试系统的限制和故障恢复能力，也就是测试Web应用系统会不会崩溃，在什么情况下会崩溃。黑客常常提供错误的数据负载，直到Web应用系统崩溃，接着当系统重新启动时获得存取权。压力测试的区域包括表单、登陆和其他信息传输页面等。
测试需要验证系统能否在同一时间响应大量的用户，在用户传送大量数据的时候能否响应，系统能否长时间运行。可访问性对用户来说是极其重要的。如果用户得到“系统忙”的信息，他们可能放弃，并转向竞争对手。系统检测不仅要使用户能够正常访问站点，在很多情况下，可能会有黑客试图通过发送大量数据包来攻击服务器。出于安全的原因，测试人员应该知道当系统过载时，需要采取哪些措施，而不是简单地提升系统性能。
1）瞬间访问高峰
如果您的站点用于公布彩票的抽奖结果，最好使系统在中奖号码公布后的一段时间内能够响应上百万的请求。负载测试工具能够模拟X个用户同时访问测试站点。
2）每个用户传送大量数据
网上书店的多数用户可能只订购1-5书，但是大学书店可能会订购5000本有关心理学介绍的课本?或者一个祖母为她的50个儿孙购买圣诞礼物(当然每个孩子都有自己的邮件地址)系统能处理单个用户的大量数据吗?
3）长时间的使用
如果站点用于处理鲜花订单，那么至少希望它在母亲节前的一周内能持续运行。如果站点提供基于web的email服务，那么点最好能持续运行几个月，甚至几年。可能需要使用自动测试工具来完成这种类型的测试，因为很难通过手工完成这些测试。你可以想象组织100个人同时点击某个站点。但是同时组织100000个人呢。通常，测试工具在第二次使用的时候，它创造的效益，就足以支付成本。而且，测试工具安装完成之后，再次使用的时候，只要点击几下。
安全性测试
SQL注入（比如登录页面）
XSS跨网站脚本攻击：程序或数据库没有对一些特殊字符进行过滤或处理，导致用户所输入的一些破坏性的脚本语句能够直接写进数据库中，浏览器会直接执行这些脚本语句，破坏网站的正常显示，或网站用户的信息被盗,构造脚本语句时，要保证脚本的完整性。
URL地址后面随便输入一些符号，并尽量是动态参数靠后
验证码更新问题
现在的Web应用系统基本采用先注册，后登录的方式。因此，必须测试有效和无效的用户名和密码，要注意到是否大小写敏感，可以试多少次的限制，是否可以不登录而直接浏览某个页面等。
Web应用系统是否有超时的限制，也就是说，用户登录后在一定时间内（例如15分钟）没有点击任何页面，是否需要重新登录才能正常使用。
为了保证Web应用系统的安全性，日志文件是至关重要的。需要测试相关信息是否写进了日志文件、是否可追踪。
当使用了安全套接字时，还要测试加密是否正确，检查信息的完整性。
服务器端的脚本常常构成安全漏洞，这些漏洞又常常被黑客利用。所以，还要测试没有经过授权，就不能在服务器端放置和编辑脚本的问题。
curl模拟发送GET,POST请求:
GET: curl "URL?p1=v1&p2=v2&..."
POST: curl -d "p1=v1&p2=v2&..." URL
