Web性能测试用例的编写
上一篇 / 下一篇 2015-08-02 09:05:37 / 个人分类:测试经验
文章来源
- 文章来源:【转载】
一、WEB 全面性能测试模型51Testing软件测试网;fAB/V9[#gJ2CDx6o
Web 性能测试模型提出的主要依据是:一种类型的性能测试可以在某些条件下转化成为另外一种类型的性能测试,这些类型的性能测试的实施是有着相似之处的;51Testing软件测试网!?| |!x ey
1. 预期指标的性能测试51Testing软件测试网CH2q5Z,BG
系统在需求分析和设计阶段都会提出一些性能指标,完成这些指标的相关的测试是性能测试的首要工作之一,这些指标主要诸于“系统可以支持并发用户200个;”系统响应时间不得超过20秒等,对这种预先承诺的性能要求,需要首先进行测试验证;51Testing软件测试网2v%TJ1gIcv~*A
2. 独立业务性能测试
)k&GdY [.vd~0独立业务实际是指一些核心业务模块对应的业务,这些模块通常具有功能比较复杂,使用比较频繁,属于核心业务等特点。
.I:I'P a:a9r0用户并发测试是核心业务模块的重点测试内容,并发的主要内容是指模拟一定数量的用户同时使用某一核心的相同或者不同的功能,并且持续一段时间。对相同的功能进行并发测试分为两种类型,一类是在同一时刻进行完全一样的操作。另外一类是在同一时刻使用完全一样的功能。51Testing软件测试网7e1E"ArdbJ _
3. 组合业务性能测试
xYU d3Ac T0通常不会所有的用户只使用一个或者几个核心业务模块,一个应用系统的每个功能模块都可能被使用到;所以WEB性能测试既要模拟多用户的相同操作,又要模拟多用户的不同操作;组合业务性能测试是最接近用户实际使用情况的测试,也是性能测试的核心内容。通常按照用户的实际使用人数比例来模拟各个模版的组合并发情况;组合性能测试是最能反映用户使用情况的测试往往和服务器性能测试结合起来,在通过工具模拟用户操作的同时,还通过测试工具的监控功能采集服务器的计数器信息进而全面分析系统瓶颈。
'Q,[QCsY`0用户并发测试是组合业务性能测试的核心内容。组合并发的突出特点是根据用户使用系统的情况分成不同的用户组进行并发,每组的用户比例要根据实际情况来匹配;51Testing软件测试网4E#J\/q*Hcd)x
4. 疲劳强度性能测试
^s!bH,T f}0疲劳强度测试是指在系统稳定运行的情况下,以一定的负载压力来长时间运行系统的测试,其主要目的是确定系统长时间处理较大业务量时的性能,通过疲劳强度测试基本可以判定系统运行一段时间后是否稳定;51Testing软件测试网7i9t/xn&d_OF-^sb
5. 大数据量性能测试
)G*]r:w]#v-U T^0一种是针对某些系统存储,传输,统计查询等业务进行大数据量时的性能测试,主要针对某些特殊的核心业务或者日常比较常用的组合业务的测试;51Testing软件测试网N0X!t~-Z:G-D
第二种是极限状态下的数据测试,主要是指系统数据量达到一定程度时,通过性能测试来评估系统的响应情况,测试的对象也是某些核心业务或者常用的组合业务。51Testing软件测试网BB%s\!h&O$_)i
第三种大数据量测试结合了前面两种的测试,两种测试同时运行产生较大数据量的系统性能测试;51Testing软件测试网%H$l4LO!I}5z"y%c"N1v
大数据量测试通常在投产环境下进行,并独立出来和疲劳强度测试放在一起,在整个性能测试的后期进行;大数据量的测试可以理解为特定条件下的核心业务或者组合业务测试;
.[7LVB"^5RQ06. 网络性能测试51Testing软件测试网.f*m yuG J!Y t
主要是为了准确展示带宽,延迟,负载和端口的变化是如何影响用户的响应时间的,在实际的软件项目中51Testing软件测试网:B)Ng.C/K+m
主要是测试应用系统的用户数目与网络带宽的关系。网络测试的任务通常由系统集成人员完成;
M}7t`hb07. 服务器(操作系统,WEB服务器,数据库服务器)性能测试51Testing软件测试网6C)X?-a/T4O!e6Z kB
初级服务器性能测试主要是指在业务系统工作或者进行前面其他种类性能测试的时候,监控服务器的一些计数器信息,通过这些计数器对服务器进行综合性能分析,为调优或提高系统性能提供依据;51Testing软件测试网1[?7z6s6fv
高级服务器性能测试一般由专门的系统管理员来进行如数据库服务器由专门的DBA来进行测试和调优;51Testing软件测试网3O*b~&[*r9Q!n3P&?Ol
8. 一些特殊的测试
y'_nV6P5D+e N0主要是指配置测试,内存泄露测试的一些特殊的WEB性能测试;51Testing软件测试网|3XQzz/x
二、WEB 性能测试策略
4Gc-Oq5pkGl+Jv0性能测试策略一般从需求设计阶段开始讨论如何定制,它决定着性能测试工作要投入多少资源,什么时间开始实施等后续工作的安排;其制定的主要依据是软件自身的特点和用户对性能的关注程度,其中软件自身的特点起决定性的作用;51Testing软件测试网F$Uwv;q}.g3f|^
软件按照用途的不同可以分为两大类,系统类软件和应用类软件。系统类软件通常对性能要求较高,因此性能测试应该尽早介入;应用类软件分为特殊类应用和一般类应用,特殊类应用主要有银行,电信,电力,保险,医疗,安全等领域软件,这类软件使用频繁,用户较多,也需要较早进行性能测试;一般类主要是指一些普通类应用如OA,MIS 等一般类软件根据实际情况制定性能测试策略,受用户因素影响较大;
1Rh&i ^8@BP*Ca01. 系统类软件51Testing软件测试网K0Y-B$H,_OL&K~Nx
从设计阶段就开始针对系统架构,数据库设计等方面进行讨论,从根源来提高性能,系统类软件一般从单元测试阶段开始性能测试实施工作,主要是测试一些和性能相关的算法和模块;51Testing软件测试网B][QW"BR1v-x
2. 应用类软件51Testing软件测试网:AnJ(_5d-s1p#T
特殊应用:从设计阶段就开始针对系统架构,数据库设计等方面进行讨论,从根源来提高性能,系统类软件一般从单元测试阶段开始性能测试实施工作,主要是测试一些和性能相关的算法和模块;51Testing软件测试网vF(s9q:~l.S6d
一般应用:与使用用户的重视程度有关,用户高度重视时 ,设计阶段开始进行一些讨论工作,主要在系统测试阶段开始进行性能测试实施;用户一般重视时,可以在系统测试阶段的功能测试结束后进行性能测试;用户不怎么重视时,可以在软件发布前进行性能测试,提交测试报告即可;51Testing软件测试网2J~5t`qG6r4pT
三、WEB性能测试用例设计模型
xY t%tD E*By0性能测试用例设计通常不会一次设计到位,是一个不断迭代完善的过程,即使在使用过程中,也不是完全按照设计好的测试用例来执行,需要根据需求的变化进行调整和修改; WEB性能测试用例设计模型是一个内容全面比较容易组织和调整的模型架构
L+AJn?(a_8n01. 预期性能指标测试用例51Testing软件测试网M:QJ-~n3f*](K.~s)K
指一些十分明确的,在系统需求设计阶段预先提出的,期望系统达到的,或者向用户保证的性能指标,针对每个指标都要编写一个或者多个测试用例来验证系统是否达到要求,预期性能指标测试用例主要参考需求和设计文档,把里面十分明确的性能要求提取出来,指标中通常以单用户为主;
4{&Y.x c4[$w,l0如:对于普通的客户端,系统上传5MB以内的文件,速度不低于2MB/S;51Testing软件测试网%@l-}G y2N%_%A*A
输入动作:选择1-5 MB的文件并上传,用秒表计时;
/l:pZBdpeq!m0期望的性能:上传的时间小于等于2.5S
V0t+J0m s w K"Y+I0实际性能:上传的时间2.29秒;
(Z!DW2yCk vXP/o0这类用例通常以手工的方式执行;51Testing软件测试网;@l-@%K3wa*`n3a5p8T]
2. 用户并发性能测试用例
xb#h I+R8}0用户并发测试主要通过逐渐增加用户数量来加重系统负担,并通过测试工具对应用系统,各种服务器资源进51Testing软件测试网)[:hcNuX
监控,用户并发测试可以是正常数量用户和特殊数量用户进行并发, 用户并发测试是系统性能测试的核心部分,涉及压力测试,负载测试,强度测试等多方面的内容.独立业务性能测试实际就是核心业务模块的某一业务的并发性能测试,可以理解为单元性能测试;组合业务的性能测试是一个或者多个模块的多个业务同时进行并发性能测试,可以理解为集成性能测试,单元性能测试和集成性能测试两者紧密相连合并称为用户并发性能测试;用户并发测试要求选择有代表性的关键的业务来设计测试用例,以便更有效的评测系统性能;其测试用例设计文档的基本的编写思想是按照系统的体系结构进行编写.
`o7CHp P$B'p03. 独立核心模块用户并发性能的测试用例设计51Testing软件测试网wF8jl#Ft9xs;r
完全一样功能的并发测试:主要检查系统的健壮性,从技术角度讲就是检查程序对同一时刻并发操作的处理.
,W*@2Ie3IGF%H"^0完全一样操作的并发测试:基本要求是在同一时刻进行完全一样的操作,这类测试的目的是验证核心模块在51Testing软件测试网'UZ"vR-o$n4ssT1p
大量用户使用同一功能时是否正常工作;
)n:TAfqn0相同/不同功能的子功能并发:每个不同的子功能都模拟一定的用户数量,通过工具来控制并发情况;
-L"f Xh!c%g[c"zh0如发送与接收邮件模块的一个测试用例,
u6d:F2OP$F s0功能:当在线用户达到高峰时,发送和接收普通邮件正常,保证2000个以内用户可以同时访问邮件系统,能够正常发送和接收邮件;
-S1L⪚Z!n P0目的:测试系统2000个以内的用户同时在线时能否正常发送邮件;
WJS,N`0方法:采用LOADRUNNER的录制工具录制一个邮件发送过程测试,要监视数据库服务器和WEB服务器的性能,其中发送的邮件为普通邮件,附件大小不超过1MB.
NW)l,eJq0并发用户数与事务执行情况:并发用户数,事务平均响应时间,事务最大响应时间,平均每秒处理事务数,事务成功率,每秒点击率,平均流量;51Testing软件测试网L"@"K?"K:}
并发用户数与数据库主机:并发用户数,CPU利用率,MEM利用率,磁盘I/O参数,DB参数;51Testing软件测试网di{(Y0\+}PL-G L9J
并发用户数与应用服务器的关系表:并发用户数,CPU利用率,MEM利用率,磁盘I/O参数;
F&i}Kt#ux04. 组合模块用户并发性能测试的用例设计 组合模块的性能测试是最能反映用户实际使用情况的测试,它把前面系统中具有耦合关系的模块组合起来进行测试,可以理解为集成性能测试,组合模块并发测试可以真实反映用户使用系统的情况,可以从需求,设计文档;现场调查,系统采集数据获取用户场景;
$|6]dF7N0具有耦合关系的核心模块进行组合并发测试:主要测试在多用户并发条件下,一些存在耦合关系或者数据接口的模块是否正常运行;51Testing软件测试网#b`p.Agl2c
彼此独立的,内部具有耦合关系的核心模块组的并发测试:这类测试的对象是多个模块组,每个组相关的模块具有一定的耦合关系,组与组之间关系相互独立,主要站在用户的角度考虑问题;
UL'z8DH:\Y'n0基于用户场景的并发测试:选择用户的一些典型场景进行测试,测试对象不限制于核心模块或非核心模块;51Testing软件测试网:`y+Y9D)[:Z
组合模块用户并发性能测试的前两种类型仍然是针对核心模块的同时也关注用户场景,这样做的原因是大多数的性能问题都是由用户经常使用的核心模块一起的;可以看出,组合模块的用户并发性能测试既关注功能测试,也关注性能测试,通过发现一些接口和综合性能方面的问题,使系统更加稳定的运行。51Testing软件测试网7p0W$ad1DE
如下某OA系统组合模块的一个测试用例:51Testing软件测试网$w2Y-yhIh
功能:在线用户数达到高峰时,用户可以正常使用系统,目标是满足500个以内用户同时在线使用系统;
7_4rF`c(G:in0目的:测试500个以内用户同时在线时能否使用比较常见的模块:公文系统,电子公告,网上论坛;51Testing软件测试网ree s-RT8\3b
方法:采用LOADRUNNER 的录制工具录制三项业务;业务1,在公文系统内进行打开,修改等操作;业务2,在电子公告系统内,察看发布公告; 业务3 ,在网上论坛系统内发布帖子,查看文章;每项业务分配一定数量的用户,利用LOADRUNNER来完成;