系统测试报告实例汇总.docx
《系统测试报告实例汇总.docx》由会员分享,可在线阅读,更多相关《系统测试报告实例汇总.docx(18页珍藏版)》请在冰豆网上搜索。
![系统测试报告实例汇总.docx](https://file1.bdocx.com/fileroot1/2023-2/9/59287ca9-7ecb-4bb9-b3fb-f2f439d35c2e/59287ca9-7ecb-4bb9-b3fb-f2f439d35c2e1.gif)
系统测试报告实例汇总
XX系统测试总结报告
1引言
1.1编写目的
编写该测试总结报告主要有以下几个目的
分析测试的过程,产品,资源,信息,为以后制定测试计划提供参考
1.2背景
1.3用户群
主要读者:
XX项目管理人员,XX项目测试经理其他读者:
XX项目相关人员。
1.4定义
严重bug:
出现以下缺陷,测试定义为严重bug
系统无响应,处于死机状态,需要其他人工修复系统才可复原。
点击某个菜单后出现“Thepagecannotbedisplayed”或者返回异常错误。
异常错误
回异常错误
系统定义不能重复的字段输入重复数据后,出现“
Thepagecannotbedisplayed”
或者返回
异常错误
1.5测试对象
1.6测试阶段
系统测试
1.7测试工具
Bugzilla缺陷管理系统
1.8参考资料
《XX
《XX
《XX
《XX
《XX
需求和设计说明书》
数据字典》
后台管理系统测试计划》后台管理系统测试用例》项目计划》
2测试概要
XX后台管理系统测试从2007年7月2日开始到2007年8月10日结束,共持续39天,测试
13.7个,测试共发现427个
功能点174个,执行2385个测试用例,平均每个功能点执行测试用例
bug,其中严重级别的bug68个,无效bug44个,平均每个测试功能点
2.2个bug。
XX总共发布11个测试版本,其中B1—B5为计划内迭代开发版本
(针对项目计划的基线标识)
B6-B8为回归测试版本。
计划内测试版本,B1—B4测试进度依照项目计划时间准时完成测试并提
交报告,其中B4版本推迟一天发布版本,测试通过增加一个人日,准时完成测试。
B5版本推迟发
布2天,测试增加2个人日,准时完成测试。
B6-B11为计划外回归测试版本,测试增加5个工作人日的资源,准时完成测试。
XX测试通过Bugzilla缺陷管理工具进行缺陷跟踪管理,B1—B4测试阶段都有详细的bug分析
表和阶段测试报告。
2.1进度回顾
版本/时间
计划开始时
间
实际开始时
间
计划完成时间
实际完成时
间
加班
增加资源
B1
2007.7.2
2007.7.2
2007.7.5
2007.7.5
否
否
B2
2007.7.16
2007.7.16
2007.7.19
2007.7.19
否
否
B3
2007.7.23
2007.7.23
2007.7.25
2007.7.24
否
2个人日
B4
2007.7.28
2007.7.29
2007.7.31
2007.7.31
1个人1天1
个人2天
2个人日
B5
2007.8.1
2007.8.2
2007.8.6
2007.8.3
否
2个人日
B6
2007.8.4
2007.8.4
2个人1天
2个人日
B7
2007.8.5
2007.8.5
1个人1天
1个人日
B8
B9
2007.8.9
2007.8.9
2007.8.10
2007.8.10
否
2个人日
B10
合计
1个人6天
11个人日
2.2测试执行
测试计划规定的测试策略,在测试执行中都有体现,在测试执行过程中,依据测试计划和测试用例,
对系统进行了完整的测试
2.3测试用例
2.3.1功能性
系统实现的主要功能,包括查询,添加,修改,删除。
系统实现的次要功能,包括为用户分配酒店,为用户分配权限,渠道酒店绑定,渠道RATE绑定,权限控制菜单按钮。
以及需求规定的输入限制
需求规定的输入输出字段,
一致性,可理解性一致性,可理解性
2.3.2易用性
操作按钮提示信息正确性,
限制条件提示信息正确性,必填项标识输入方式可理解性
中文界面下数据语言与界面语言的一致性
3测试环境
硬件配置
CPU:
Intel(R)Celeron(R)
CPU2.40GHzstepping01
Memory:
1048256k
HD:
ST380817AS80G
SATA
CPU:
Intel(R)Celeron(R)
CPU2.40GHzstepping01
Memory:
1048256k
HD:
ST380817AS80G
SATA
CPU:
Intel(R)Celeron(R)
CPU2.40GHzstepping01
Memory:
1048256k
HD:
ST380817AS80G
SATA
软件配置
OS:
CentOS4.2
JDK1.5.0_06
Apache2.2.0
Tomcat5.5.15
OS:
CentOS4.2
MySQL5.0.17Linux
Window2000
Professional(SP2)
IE6.0.2900.2180.Xpsp_sp2
网络环境
10MLAN
10MLAN
10MLAN
3.1.2网络拓扑
应用服务器、数据库服务器
4测试结果
4.1Bug趋势图
此次黑盒测试总共发布11个版本,B1—B5为计划内迭代开发版本(针对项目计划的基线标识)
B6-B11为进行的回归测试版本,
bug版本趋势图如下图所示:
bu吕版本趋势图
第一阶段,增量确认测试。
时间从2007年7月2日到2007年8月3日。
从Bug趋势图中可以看出,每个版本的bug数基本维持在60个左右。
B1:
从图中看到B1共有33个BUG,因为B1版本有一个功能模块在B2版本才开始测试,B1
测试模块相对较少,所以B1版本bug相对较少。
B2:
由于B1中的一个功能模块增加到Build2中进行测试,这一版本除了对B1中的BUG进行
验证同时对B1进行了回归测试,所以B2中的bug数相对B1出现了明显的增长趋势,
B3:
B3版本因为有B2版本的bug验收测试,以及B1,B2的回归测试,共发现67个bug,和B2
基本保持一致。
bug数呈
B4:
B4版本bug数有一个下降的趋势,是因为B4版本推迟发布,新增加了测试人员参与测试,
对系统不够熟悉,以及测试时间紧张,部分测试用例没有执行,测试覆盖度不够,所以发现下降趋势。
B5:
B5版本bug数又有一个增加的趋势,主要是由于开发功能模块多,该版本需求定义不明确。
第二阶段,BUG验证和功能回归确认测试。
时间从2007年8月4日到2007年8月14日。
B6和B7进行了回归测试,B8没有进行回归测试,只验证了B1—B7的bug。
B6:
进行第一轮回归测试,发现的bug数为33个,遗留一个问题,为数据字典种类默认值问题
B7:
进行第二轮回归测试,第一次回归测试没有涉及到权限控制菜单按钮的测试,在本次回归
测试的时候,重点进行了这个方面的测试,又发现了大量的权限相关的
bug。
B8:
B8没有进行全面的回归测试,只验证了B1—B7未通过验证的bug,所以该版本的bug数
明显比较少。
B9:
B9版本进行了全面的回归测试,同时重点测试了权限控制,所以发先的bug数又呈现上升
的趋势。
测试发现44个bug,严重级别的bug为14个,严重级别的bug集中在权限控制上,功能性严重bug没有发现,说明权限控制依旧不稳定,但是系统功能已经稳定。
B10:
B10版本验证了B9版本发现得bug,没有进行全面的回归测试。
B10版本在验证bug的时
bug,
候,重现打开Bug6个,新增bug2个,重新打开bug有5个为严重级别bug,是关于权限控制的而新发现的bug,1个为严重级别的bug,也是属于权限控制的。
说明,权限控制还存在着问题,需
遗留
要修改权限管理bug,重新发布版本后进行全面的回归测试。
B10版本新发现的bug详细分析见bug分析。
B11:
B11中验证了B1—B10未验证的bug,重点测试了权限控制,同时进行了查询,添加,删除,修改的功能测试,测试过程中未发现
bug。
4.2Bug严重程度
测试发现的bug主要集中在normal和minor阶段,属于一般性的缺陷,但是测试的时候,出现了68个严重级别的bug,出现严重级别的bug主要表现在以下几个方面
系统主要功能没有实现添加数据代码重复后,出现的找不到页面的错误
多语言处理,未考虑非语种代码的情况
数据库设计未考虑系统管理员角色,导致用系统管理员进行操作的时候出现找不到页面错
权限控制异常
严重级别bug按版本分布如下:
由严重bug版本分布图可以看出,严重级别的bug版本趋势和bug版本趋势基本是一致的,但是,
在B7和B9版本中年,严重级别的
bug明显增多,主要原因是B7和B9版本测试了权限控制按钮功
能,权限问题出现的严重级别的bug比较多。
权限bug主要表现:
具有相应按钮操作的权限,页面无相应按钮,无法执行该功能无相应按钮操作权限,页面有相应按钮,点击按钮能出现权限异常错误有相应按钮操作权限,有相应按钮,执行该功能出现权限异常错误
4.3Bug引入阶段
由上图可以看出,主要为前台编码和页面设计方面的
bug,占到了全部bug的2/3。
4.4Bug引入原因
由上图可以看出,主要为前台编码和易用性方面的bug,占到了全部bug的2/3。
4.5
Bug状态分布
400
350
300
250
150
JOO
0
NEW
EEDFENED
VEEIFIED
CLOSED
RESOLVED
Status
由bug状态图可以看出,未解决的
bug有4个,主要是B8中新提交的bug,是关于用户管理的
bug,因为用户权限管理需要重新设计所以,
该部分的
bug暂时没有解决。
5测试结论
5.1功能性
系统正确实现了通过数据字典管理基础数据的功能,
实现了数据内容的多语言功能,实现了中英
文界面。
实现了基础数据管理,酒店集团管理,酒店基础信息管理,渠道管理,代理管理,用户管理的查询,添加,修改,删除的功能,系统还实现了将权限控制细化到菜单按钮的功能。
系统在实现用户管理下的权限管理功能时,存在重大的缺陷,权限控制不严密,权限设计有遗漏。
5.2易用性
现有系统实现了如下易用性:
查询,添加,删除,修改操作相关提示信息的一致性,可理解性输入限制的正确性输入限制提示信息的正确性,可理解性,一致性
现有系统存在如下易用性缺陷:
界面排版不美观输入,输出字段的可理解性差输入缺少解释性说明中英文对应的正确性中英文混排
5.3可靠性
现有系统的可靠性控制不够严密,很多控制是通过页面控制实现的,如果页面控制失效,可以向数据库插入数据,引发错误。
现有系统的容错性不高,如果系统出现错误,返回错误类型为找不到页面错误,无法回复到出错前的状态
5.4兼容性
现有系统支持window下的IE浏览器和傲游浏览器,支持linux系统下的IE浏览器和火狐浏览
器。
现有系统未进行其他兼容性测试
5.5安全性
现有系统控制了以下安全性问题:
把某一个登录后的页面保存下来,不能单独对其进行操作不进行登录
直接输入某一页面的Url能否打开页面并进行操作不应该允许。
现有系统未控制以下安全性问题:
用户名和密码应对大小写敏感登陆错误次数限制
6分析摘要
6.1覆盖率
此次测试,所有测试用例都是在中文界面下执行,未在英文界面下执行,测试不包括英文界面下的测试,也不包括正对英文翻译的测试。
此次测试,部分页面需求描述无明确的定义,对输入限制无详细定义,无明确的测试依据,在测试过程中,测试是根据输入字段含义,测试人员理解,以及和项目经理,开发人员沟通获得测试依据,无法保证测试依据的正确性和完整性,因此,没有进行完整的,正确的无效数据的测试,测试覆盖率不够,无法保证测试的有效性和正确性
F面为此次测试测试用例覆盖率分析图:
测试用例覆盖率分析
6.2遗留缺陷的影响
2.缺陷描述:
列表页面
添加页面
取消政策
停留政策
担保政策
机场
参照点
会议室详情
打包促销
服务
Rate
而其他模块语言显示“中文语言”
酒店基础信息管理模块,默认语言设置不一致。
用中文查询酒店,进入酒店基础信息模块后,如下模块,语言显示为“请选择”
缺陷影响:
相同功能模块默认语言设置不一致,一致性不好
单位
翻译完毕后再确认。
缺陷描述:
数据字典种类修改,默认值设置后,在调用该数据字典种类的数据字典,默认值无显
缺陷影响:
数据字典种类的默认值设置后,不能显示设置的默认值,相当于数据字典种类默认值
设置功能未实现
b>权限控制错误
B9版本发现该权限,B10版本未通过验证。
该模块后台无11.缺陷描述:
新建业务管理员权限用户,进入打包促销页面出现权限异常错误
缺陷影响:
除系统管理员外,其他用户无法进行打包促销操作
推迟原因:
B10版本发现该bug,目前该模块开发人员调休,无法修改bug
6.3建议
在项目开始的时候应该制定编码标准,数据库标准,需求变更标准,开发和测试人员都严格按照标准进行,可以在后期减少因为开发,测试不一致而导致的问题,同时也可以降低沟通成本。
发布版本的时候,正确布置测试环境,减少因为测试环境,测试数据库数据的问题而出
现的无效bug。
开发人员解决bug的时候,填写bug原因以及解决方式,方便bug的跟踪。
开发人员在开发版本上发现bug,可以通知测试人员,因为开发人员发现的bug很有可能在测试版本上出现,而测试人员和开发人员的思路不同,有可能测试人员没有发现该bug,而
且,这样可以保证发现的bug都能够被跟踪。
7度量
7.1资源消耗
测试时间
2007年7月2日至2007年8月6日共35天
测试人力
1Ax7天+1Ax35天=42人天
硬件资源
服务器:
PC2台
客户端:
PC2台
7.2缺陷密度
8典型缺陷引入原因分析
测试过程中发现的缺陷主要有以下几个方面:
1.需求定义不明确
需求文档中,存在功能定义错误,输入输出字段描述错误,输入输出字段限制定义错误,
输入输出限制定义缺失这几种类型的缺陷。
使得开发人员根据需求进行设计时,没有考虑相关
功能的关联性,以及需求错误的地方,在测试过程中,需求相关的问题表现出来。
需求做改正,
设计必须跟着做改动,浪费时间和影响开发人员的积极性,降低开发人员对需求的信任,可能
会导致开发人员不按照需求进行设计而根据自己的经验来进行设计。
2.功能性错误
功能没有实现,导致无法进行需求规定的功能的测试。
主要是无法进入酒店设施管理,会议室管理页面,酒店安全项管理无法保存信息,地区,房型删除功能缺失。
功能实现错误,实现了需求未定义的功能,执行需求定义的功能时系统出现错误。
主要是角色拥有不属于自己的权限,酒店联系人删除页面跳转错误等。
3.页面设计和需求不一致
页面设计没有根据需求进行,输入,输出字段文字错误,用户无法理解字段含义。
页面设
计没有完成需求规定的输入限制验证,导致用户可以输入错误的或者无效的数据,这些数据有
可能会引起功能性错误。
系统中很多输入字段是通过调用数据字典的方式输入,但是现有系统中,很多数据字典的多语言信息没有完成,导致使用多语言的时候,显示空白字段。
系统中很多地方使用多语言,由于多语言编码不统一导致页面设计和数据设计使用语
言编码不一致,由此引起的多语言数据无法显示的缺陷。
页面设计不友好,系统中很多页面的输入字段无明确的输入提示,用户无法理解何种输入是正确的,但是用户输入错误后,系统提示出错,增加用户负担。
提示信息错误,不同模块相同结果的提示信息不一致,用户操作后,相应的提示信息不明确,引起用户误解。
6.
提示信息一致性,用户在不同页面执行相同的操作,提示信息不同。
开发人员疏忽引起的缺陷
因为开发人员的疏忽,导致系统需要验证的地方,调用了错误的验证,系统需要进行输入控制的地方没有进行相应的控制。