赞
踩
测试用例(Test Case)是为了实施测试而向被测试的系统提供的一组集合,这组集合包含:测试环境、操作步骤、测试数据、预期结果等要素。(注意:不需要执行结果,因为执行结果需要执行完测试用例才知道,没有测试用例自然就没有执行结果)
测试用例原则一:测试用例中一个必需部分是对预期输出或结果进行定义。
好的测试用例是一个不熟悉业务的人也能依据用例来很快的进行测试。
评价测试用例的标准:对比好坏用例的评价标准。
- 用例表达清楚,无二义性。
- 用例可操作性强。
- 用例的输入与输出明确。一条用例只有一个预期结果。
- 用例的可维护性好。
- 用例对需求的覆盖率高。
在编写测试⽤例的时候,每个用例需要给出这些要素对应的信息。
- ⽤例编号 test-01
- -----------------------------------------------------------------------------------------
- 标题 成功注册⽹易邮箱
- -----------------------------------------------------------------------------------------
- 测试⽅式 ⼿⼯测试
- -----------------------------------------------------------------------------------------
- 功能模块 注册登陆
- -----------------------------------------------------------------------------------------
- 重要性 重要
- -----------------------------------------------------------------------------------------
- 测试前提 系统运⾏正常,邮件服务器已开启
- -----------------------------------------------------------------------------------------
- 测试环境 win10 Chrome版本103.0.5060.66(正式版本)(64位)
- -----------------------------------------------------------------------------------------
- 测试数据 邮箱地址:996402440@qq.com
- 密码:123456
- ⼿机号:12312341234
- -----------------------------------------------------------------------------------------
- 测试步骤 1.打开⾕歌浏览器,输⼊⽹易注册地址:https://mail.163.com/register/index.htm
- 2.输⼊邮箱地址,密码,⼿机号,获取验证码并输⼊正确的验证码,勾选协议
- 3.点击注册按钮
- -----------------------------------------------------------------------------------------
- 期望结果 展现注册成功的结果⻚,并且使⽤刚注册的账号可以正常登陆并进⼊邮箱⾸⻚
- -----------------------------------------------------------------------------------------
笔试的时候编写测试用例题,按照 excel 表格的方式来答题(会涉及到测试用例的要素)
面试的时候回答测试用例题,按照思维导图的方式一一道来即可(不会涉及到测试用例的要素)
测试中可能会遇到很多问题(能解决的问题),诸如:
测试用例的出现就是解决以上这些问题。另外,测试用例的作用还可以避免测试人员被迫背锅。实际中产品出现问题,第一责任人首先想到的是测试为什么没有测到?上面展示的是传统的编写测试用例的方式,在学习敏捷模型的时候了解到,如今大多数企业采用的都是思维导图的方式来编写测试用例,后面的内容包括用例练习都是用思维导图 / 脑图进行编写。
现在有一款产品,要求我们对 “门锁” 设计测试用例,假如我们是测试人员,该如何设计呢?
用例的设计最重要的一点是保证功能是正确的。上图给出的案例,在互联网企业中,这样去设计测试用例的非常少,缺乏经验的同学往往以上面的思路去设计。
正确设计测试用例的思想:常规思维 + 逆向思维 + 发散性思维
明白了设计测试用例是思维的正确还往往不够。
若仅仅通过头脑风暴去设计测试用例,那么当我们面对面试官时,能够想出来的用例是寥寥无几的,所以在设计测试用例的时候需要有思路的去设计。
设计测试用例的万能公式: 功能测试 + 界面测试 + 性能测试 + 兼容性测试 + 易用性测试 + 安全测试
从产品功能角度出发,验证功能是否是正确的。
功能测试是一个试图发现程序与其外部规格说明之间存在不一致的过程。外部规格说明是一份从最终用户的角度对程序行为的精确描述。功能测试通常是一项黑盒操作。在进行功能测试时,需要对规格说明进行分析以提炼测试用例,本课程中讨论的具体设计测试用例的方法尤其适用于功能测试。
然而,不仅是工作中还是面试中,可能会存在需求不明确的功能?这种情况下该如何进行功能测试?
肉眼可以看到的部分都称为界面,界面所有的元素都需要测试。界面涉及到的内容:元素(大小、颜色、形状、性质(可以触摸到的))
对软件界面上所有的内容都需要进行测试。
要求:
通常为一些极端的情况。
性能测试和功能测试的区别是:功能测试检查软件是否做了,而性能测试测试软件做的好不好。
不同版本(软件、系统),浏览器的兼容性(不同的浏览器)
软件是部署在硬件系统之上,并依赖所需要的软件环境。如 QQ 可以在 PC 端打开,也可以在移动端打开;移动端⼜分为 IOS 系统和 Android 系统,且市面上手机又有不同的品牌、不同的机型、不同的版本。软件是否能够在不同的环境下正确运行需要测试人员进行验证。
既然市面上有众多版本的机器,那么在执行兼容性测试时难道所有的机型都需要全面覆盖吗?
选取标准:
实际在企业中,后台是可以获取到使用产品的机型,并以报表的形式统计在后台,供产品人员或其他人员制定策略参考。
具备简单易上手的属性。
易用性测试的标准是检查产品是否具备简单易上手的属性。假如测试人员从来没有安装或使用过该产品,作为一个新用户,对当前产品是否能够快速适用产品的使用流程。
安全测试和性能测试⼀样都是比较大的领域。常见的安全问题如:
- 隐私数据明文显示。
- 参数未强校验导致 SQL 注入。
- 越权:普通用户也可以执行管理员权限的操作。
除了万能公式之外,还有⼀个比较常用的测试类型:弱网测试、安装卸载测试。
网络:
中断:
针对需要进行部署的软件,除了软件功能外,我们还需要关注软件的能够成功安装和卸载。
基于需求设计测试用例是测试设计和开发测试用例的基础,第一步就要分析测试需求,验证需求是否正确、完整、无二义性,并且逻辑自洽。
在需求正确的基础上细化测试需求,从测试需求提炼出一个个测试点或者测试项,然后根据每一个测试点进行测试用例的设计。
在分析测试需求时,一般分为功能测试需求和非功能测试需求。
基于需求的设计方法也是总的设计测试用例的方法,在工作中,我们需要参考需求⽂档 / 产品规格说明书来设计测试用例。
测试人员接到需求之后,要对需求进行分析和验证,从合理的需求中进⼀步分析细化需求,从细化的需求中找出测试点,根据这些测试点再去设计测试用例。
下面以邮箱注册账号需求为例来设计测试用例:
明确需求中的功能点:账号注册,账号登陆
结合万能公式设计测试点:
对于功能测试中,可以借助功能框图来帮助我们进行测试的需求分析。概括起来,功能测试需求包括以下,通常包括以下几个方面:
- 系统各个功能界面的验证。
- 借助业务把功能串起来进行测试。
- 功能的一致性,交互性(多功能互操作)的测试。
- 系统的不同输入,结果输出的业务数据测试。
- 功能的错误操作,异常操作的测试(属于负面测试)。
- 功能实现用到的算法验证,有时需要用运代码评审。
- 用户操作的易用性,用户体验,往往结合功能测试同时验证。
比如字处理软件(Word,PPT),媒体(音频 / 视频)播放软件(电脑自带的)等。这类软件对系统的功能测试要求是最低的,但是对兼容性和稳定性,可移植性有一定的要求。
比如电子邮件,即时通信系统(飞Q,企业QQ)等,在系统功能测试需求上比纯客户端复杂,要求功能正确,稳定性能好。但是整体上看,对性能,安全性,兼容性要求不高。
比如电子商务,网上银行,视频网站(腾讯,优酷)等,除了有复杂的系统的功能测试需求外,在系统的性能,安全性,兼容性,容错性,可靠性等都有很高的要求。
此外,对于大型企业级应用系统,由于应用模式,系统架构的不同(分布式,微服务等),我们必须结合架构和应用模式来具体分析非功能性测试需求,特别是可扩展性,可靠性,安全性等。技术架构对功能的影响小,但是非功能性测试就要深入架构分析,才能更好的把我测试范围和测试方法。
举一个例子百度云盘非功能测试的例子:
- 用户需求:
- 购买3000块钱以内的华为智能手机
- 测试用例:
- 1.价格<=3000元
- 2.品牌为华为
- 3.智能手机
- 4.手机功能验证:
- 4-1.打电话
- 4-2.接电话
- 4-3.发短信
- 4-4.收短信
- ...
- 软件需求:
- 1.1.1.1.5.3 异常事件流
- 1. 若用户未收到激活邮件,可在登录界面录入电子邮件及密码后,再次发送激活邮件。
- 2. 每次发送的激活邮件,仅在发送邮件后起24小时之内有效,超过24小时后需重新发送激活邮件。
- **测试用例**
- 1-1、未收到邮件,登录时输入电子邮件及密码后,再次发送激活邮件
- 1-2、已收到邮件,登录时输入电子邮件及密码后,不发送激活邮件
-
- 2-1、收到邮件,未激活,24小时内进行激活
- 2-2、收到邮件,未激活,24小时后链接过期进行激活。
- 2-3、收到邮件,已激活,24小时后链接过期,再次点击激活?
- 页面检查:
- 1、收到激活邮件
- 2、邮件内容正确
- 3、激活URl正确,可激活
- 4、再次激活提示已激活
- 5、过期激活提示已过期
注册邮箱账号设计的测试用例存在用例还未完全设计完成,“姓名必填,6~15位的字符类型”,这样⼀个具体的需求该如何来设计测试⽤例呢?
测试的时候通过穷举法来测试 6 位、7 位、8 位 ......14 位,15 位是否测试通过,这样的方法能够满足测试的要求吗?若此时把范围从 “6~15位” 改成 “6~150位呢”?这样⼀个简单的测试点需要测试多久呢,显示是不符合企业测试要求的。而等价类法的出现就解决了穷举法不能解决的问题。
依据需求将输入(特殊情况下会考虑输出)划分为若干个等价类,从等价类中选出⼀个测试用例,如果这个测试用例测试通过,则认为所代表的等价类测试通过,这样就可以用较少的测试用例达到尽量多的功能覆盖,解决了不能穷举测试的问题。
思路:输入的集合是无穷的,不能全都覆盖到。
依据需求将输入(特殊情况下会考虑输出)划分为若干个等价类,从等价类中选出一个测试用例,如果这个测试用例测试通过,则认为所代表的等价类测试通过,这样就可以用较少的测试用例达到尽量多的功能覆盖,解决了不能穷举测试的问题。
- 有效等价类:对于程序的规格说明书是合理的、有意义的输入数据构成的集合,利用有效等价类验证程序是否实现了规格说明中所规定的功能和性能。满足用户需求输入集合。
- 无效等价类:根据需求说明书,不满足用户需求输入的集合。
根据等价类设计测试用例的方式:
根据边界值将邮箱注册账号的用例进行完善:
- 【超市买水果】
- 有效等价类:苹果、梨子、西瓜...
- 无效等价类:青菜、大米、饮料...
- |用户名 | 必填,录入用户名 | 6至15
-
- 有效等价类:6~15位
- 无效等价类:小于6位 && 大于15位
等价类思想设计测试用例的步骤:
边界值分析法就是对输入或输出的边界值进行测试的一种黑盒测试方法。通常边界值分析法是作为对等价类划分法的补充,这种情况下,其测试用例来自等价类的边界。
日常语言中的 “边界” 漏洞:考完试发成绩了, 老师布置寒假作业:超过 60 分的,所有题目抄写 1 遍,低于 60 分的,所有题目抄写 3 遍。于是小明就没有写作业,因为他刚好 60 分。
边界值包含:边界值 + 次边界值
继续将上述用例通过边界值补充完整:
边界值即给定返回的左数据和右数据。
选择次边界值的时候,根据边界值的有效无效情况来定:
上点:边界上的点。
内点:边界内的点(不管范围是闭区间开始开区间)。
离点:边界值附近的一个点(闭区间:区间外距离上点最近的点,开区间:区间内距离上点最近的点)。
因果图是一种简化了的逻辑图,能直观地表明程序输入条件(原因)和输出动作(结果)之间的相互关系。因果图法是借助图形来设计测试用例的一种系统方法,特别适用于被测试程序具有多种输入条件、程序的输出又依赖于输入条件的各种情况。
通过具体的方法能够将测试用例设计的更加完整和规范。
需求中会存在各种各样的场景,现在我们把需求改成如下的要求:
用户输入的账号中包含 admin 字符,或者通过内部链接进入注册页面,提交注册按钮成为管理员身份;反之无管理员身份。
通过这个需求可以看出,不同的组合操作可能对应不同的结果。采用正交法无法解决这样的问题。而正交法能够解决需要考虑输入之间的组合关系对应不同结果的场景。
条件为真,结果一定为真。
所有的条件都得满足,如果有一个条件不满足,那么结果就为假。
满足其中一个条件结果就为真,如果条件全部为假,那么结果就为假。
条件为假,结果才为真。
- 分析需求中所有可能的输入条件和输出条件。
- 找出输入条件与输出条件之间的对应关系。
- 设计判定表。
- 根据判定表编写测试用例,把判定表对应到每一个测试用例。
判定表(Decision table)是一种表达逻辑判断的工具。
通过该图,可以把所有条件对应的结果清晰的表达出来,需要借助该表来清晰的写出测试用例。
确认了步骤后,我们使用判定表法进⼀步对上述需求进行测试用例的设计:
输入条件:ac ab bc abc a b c 非abc
对应结果:1 2 1 1 2 2 2 2
有 3 个条件,输出有 2 个取值,所以表的列数为:2*2*2=8
假设业务单据的处理规则为: “ 淘宝 618 活动,订单已提交,订单合计金额大于 300 元或有红包,则优惠” 。
c. 设计判定表:
d. 把判定表对应到每一个测试用例:
可以在后面补充符合要求的测试要素。
通过等价类和边界值方法我们完成了部分用例的补充。
当前还剩下⼀个场景的用例未补充完成,“只填写部分选项”,这⾥到底要设计多少测试用例呢?
通常来说,为了保证系统的测试覆盖率,我们⾸先能够想到的就是排列组合。
假如当前有两个选项 A 和 B,可以设计出都填写、都不填写、填写 A、填写 B 四个测试用例(2²)。
假如当前有三个选项 A、B、C,通过设计可以得到 8 个测试⽤例(2³)。
... ...
当前可选的选项是5个,分别是,姓名、电⼦邮箱、密码、确认密码、验证码。按照排列组合设计出来的⽤例是32个.....
正交法的目的是为了减少用例数目。用尽量少的用例覆盖输入的两两组合。
正交试验设计(Orthogonal experimentaldesign)是研究多因素多水平的一种设计方法,它是根据正交性,由试验因素的全部水平组合中挑选出部分有代表性的点进行试验,通过对这部分试验结果的分析了解全面试验的情况,找出最优的水平组合。正交试验设计是一种基于正交表的、高效率、快速、经济的试验。
正交表:
如图最简单的正交表是 L(4)(2(3)),含意如下:“L” 代表正交表;L 下角的数字 “4” 表示有 4 横行,简称行,即要做四次试验;括号内的指数 “3” 表示有 3 纵列,简称列,即最多允许安排的因素是 3 个;括号内的数 “2” 表示表的主要部分只有 2 种数字,即因素有两种水平 1 与 2。
- 每一列中,不同的数字出现的次数都一样多。
- 任何两列中的各有序数对出现的次数都一样多(数字的排列方式齐全而且均衡)。
根据正交表的性质,⼀般人很难通过手动设计出正交表。
充分理解需求(有哪些元素(变量))
-> 确定因素水平(每个因素有哪几个水平(变量的取值))
-> 画正交表(选择一个合适的正交表,把变量的值映射到表中)
-> 补充正交表
-> 将正交表转换成测试用例(把每一行的各因素水平的组合作为一个测试用例,加上你认为可疑且没有在表中出现的用例组合)
以注册为例,采用正交法补全剩下的测试用例。
姓名、邮箱、密码、确认密码、验证码必须全部输入,才能进行注册。
因素:姓名、邮箱、密码、确认密码、验证码。
水平:填写、不填写
allparis 目录下创建新的文本文件 20240506.txt,复制 Excel 中的因素和水平,直接粘贴到文本中保存并退出。
进入到 allpairs 的目录下,执行命令:allpairs.exe 文件名 > 结果文件名(将⽣成的正交表数据放入20240506_result.txt 文件中)
没有任何的提示表示生成成功。
至此,就可以看到生成了 20240506_result.txt:
根据生成的正交表来编写测试用例,继续将重要的用例补全(例如:全部填写 / 全部不填写)
注意:~ 意味着此时这个取值可以是任意的选项:可以填写,也可以不填写。
使用 allparis 生成的正交表和预期有出入,但是不影响我们用来设计测试用例。
场景设计法是针对整个流程进行设计的。
现在的软件几乎都是用事件触发来控制流程的,事件触发时的情景便形成了场景,而同一事件不同的触发顺序和处理结果就形成事件流。该方法可以比较生动地描绘出事件触发时的情景,有利于测试设计者设计测试用例,是测试用例更容易理解和执行。
典型的应用是是用业务流把各个孤立的功能点串起来,为测试人员建立整体业务感觉,从而避免陷入功能细节忽视业务流程要点的错误倾向。
通过运用场景来对系统的功能点或业务流程的描述,从而提高测试效果的⼀种方法。用例场景来测试需求是指模拟特定场景边界发生的事情,通过事件来触发某个动作的发生,观察事件的最终结果,从而用来发现需求中存在的问题。我们通常以正常的用例场景分析开始,然后再着手其他的场景分析。
场景法⼀般包含基本流和备用流,从⼀个流程开始,通过描述经过的路径来确定的过程,经过遍历所有的(基本)基本流和(基本)备用流来完成整个场景。场景主要包括 4 种主要的类型:正常的用例场景,备选的用例场景,异常的用例场景,假定推测的场景。
场景法就是⼀个常规的流程中,某些阶段可能会出现⼀些意想不到的情况,常规流程是基本流,从阶段中分析出来的不同情况被称之为备选流,场景法比较考验发散思维。
该方法可以比较生动地描绘出事件触发时的情景,有利于测试设计者设计测试用例,是测试用例更容易理解和执行。
典型的应用是是用业务流把各个孤立的功能点串起来,为测试人员建立整体业务感觉,从而避免陷入功能细节忽视业务流程要点的错误倾向
想象注册的场景来设计用例,这与根据需求的业务流来设计差不多。主要是想象各种业务流来设计用例。例如我们可以再想象以下场景:
- 用户激活后再次点击邮件激活链接。
- 已注册用户再次注册。
通常情况下,需要将用户经常使用的功能模块串在一起进行测试。
错误猜测法是对被测试软件设计的理解,过往经验以及个人直觉,推测出软件可能存在的缺陷,从而针对性地设计测试用例的方法。
错误猜测法更多依靠的是经验。这个方法强调的是对被测试软件的需求理解以及设计实现的细节把握,还有个人的经验和直觉。
错误推测法和目前流行的 “探索式测试方法” 的基本思想一致,这类方法在敏捷开发模式下的投入产出比很高,被广泛应运于测试。
当我们⼀提到某个非常熟悉的人的名字,脑海会立刻浮现对他的评价:
“武大郎”:憨厚,⽼实,为⼈坦诚,乐于助人。
“潘金莲”:美丽,“温柔”,“疼爱丈夫”,“善于交友”,“精通制衣”。
张三要去卖瓜:
这个方法的缺点是难以系统化,并且过度依赖个人能力。
注意 :笔试的时候编写测试⽤例需要使用传统的编写方式,须完整写出测试用例以及必要要素。面试的时候只需要按照思维导图模式说出测试用例。
针对测试用例编写测试文档:
打开弱网设置选项:
打开设置弱网的脚本:
打开弱网设置:
上传 1kb 文件需要花费 300ms(上行速率),下载 1kb 需要花费 150ms(下行速率)。
这里的数字越小,说明网速越好。
请求 URL。填写本次要请求的链接(例如:https://www.baidu.com)
请求参数:拼接 URL 上的参数。
Header:请求头:填写必要的校验参数。
Body:请求体:填写必要的参数。
Send:发送请求按钮。请求参数填写完成之后,尝试发一次请求。
打开页面开发者⼯具,选中要复制的接⼝,右键复制 URL:
打开 postman,点击 "import" 按钮(选择 "Raw text" 方式导入请求)将复制好的 URL 粘贴到文本框中(选择 "continue")。
是否每次都要重新执行一遍填写请求的步骤呢?只需⼀步,就可以在 postman 中保存经常要使用到的接口。或者在 History 按照时间来查找。
- 方法参数(参数类型、不给参数、参数传递为空等)
- 异常处理(除零错误)
- 代码规范
- 语句覆盖(涉及白盒测试)、条件覆盖、语句条件覆盖、判定覆盖...
- ... ...
存在功能可以在命令⾏使用 zip/unzip 命令对文件进行解压缩,这样的场景如何来设计测试用例?
功能测试:
界面测试:
易用性测试:
性能测试:
兼容性测试:
安全性测试:
测试用例对应的功能已删除,不可操作了。比如:微信刚出来时与 QQ 可以互发消息,下一个版本后就不可以发消息。
执行一条测试用例未发现 BUG,实际该处有 BUG。iPhone7 手机微信添加了 mobile 单车小程序,扫码不能开锁,只能使用 mobile APP 开锁,测试用例未涉及到 iPhone7 微信小程序扫码开锁。
执行一条测试用例发现了 BUG。iPhone7 手机微信添加了 mobile 单车小程序,用例已写到了 iPhone7 微信添加 mobile 小程序扫码开锁,问题被发现。
执行一条测试用例未发现 BUG,实际该处 BUG 已修改。iPhone7 手机微信添加了 mobile 单车小程序扫码开锁,可以正常开锁。
好的测试用例是一个不熟悉业务的人也能依据用例来很快的进行测试。
测试用例可以写得很简单,也可以写得很复杂。最简单的测试用例是测试的纲要,仅仅指出要测试的内容,如探索性测试中的测试设计,仅会指出需要测试产品的哪些要素、需要达到的质量目标、需要使用的测试方法等。而最复杂的测试用例就像飞机维修人员使用的工作指令卡一样,会指定输入的每项数据,期待的结果及检验的方法,具体到界面元素的操作步骤,指定测试的方法和工具等。
大多数测试团队编写的测试用例的粒度介于两者之间。而如何把握好粒度是测试用例设计的关键,也将影响测试用例设计的效率和效果。应该根据项目的实际情况、测试资源情况来决定设计出怎样粒度的测试用例。
主要考虑可以参考如下内容:
注意 :不管用例怎么简化,都不应该省略。
同行评审,尤其是临时的同行评审,应该演变成类似结对编程一样的方式。从而体现敏捷的 “个体和交互比过程和工具更有价值”,要强调测试用例设计者之间的思想碰撞,通过讨论、协作来完成测试用例的设计,原因很简单,测试用例的目的是尽可能全面地覆盖需求,而测试人员总会存在某方面的思维缺陷,一个人的思维总是存在局限性。因此需要一起设计测试用例。
这里顾客的含义比较广泛,关键在于如何定义测试,如果测试是对产品的批判,则顾客应该指最终用户或顾客代表(在内部可以是市场人员或领域专家);如果测试是被定义为对开发提供帮助和支持,那么顾客显然就是程序员了。
请写出测试此功能点的思路:
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。