1、XX系统测试总结报告XX系统测试总结报告1.引言1.1.编写目的 编写该测试总结报告主要有以下几个目的;通过对测试结果的分析,得到对软件质量的评价;分析测试的过程,产品,资源,信息,为以后制定测试计划提供参考;评估测试测试执行和测试计划是否符合;分析系统存在的缺陷,为修复和预防bug提供建议;1.2.背景 1.3.用户群 主要读者:XX项目管理人员,XX项目测试经理 其他读者:XX 项目相关人员。 1.4.定义 严重 bug:出现以下缺陷,测试定义为严重bug 系统无响应,处于死机状态,需要其他人工修复系统才可复原;点击某个菜单后出现“The page cannot be displayed”
2、或者返回异常错误;进行某个操作(增加、修改、删除等)后,出现“The page cannot be displayed”或者返回异常错误;当对必填字段进行校验时,未输入必输字段,出现“The page cannot be displayed”或者返回异常错误;系统定义不能重复的字段输入重复数据后, 出现 “The page cannot be displayed” 或者返回异常错误;1.5.测试对象 略。1.6.测试阶段 系统测试 1.7.测试工具 Bugzilla 缺陷管理系统 1.8.参考资料 XX 需求和设计说明书;XX 数据字典;XX 后台管理系统测试计划;XX 后台管理系统测试用例;
3、XX 项目计划;2.测试概要 XX 后台管理系统测试从 2007 年 7 月 2 日开始到 2007 年 8 月 10 日结束,共持续 39天,测试功能点 174 个,执行 2385 个测试用例,平均每个功能点执行测试用例 13.7 个,测试共发现 427 个 bug,其中严重级别的 bug68 个,无效 bug44 个,平均每个测试功能点2.2个bug。XX 总共发布11个测试版本,其中 B1B5 为计划内迭代开发版本(针对项目计划的基线标识) ,B6B8 为回归测试版本。计划内测试版本,B1B4 测试进度依照项目计划时间准时完成测试并提交报告,其中 B4 版本推迟一天发布版本,测试通过增加
4、一个人日,准时完成测试。B5 版本推迟发布2天,测试增加 2个人日,准时完成测试。B6B11为计划外回归测试版本,测试增加 5 个工作人日的资源,准时完成测试。XX 测试通过Bugzilla 缺陷管理工具进行缺陷跟踪管理, B1B4 测试阶段都有详细的bug分析表和阶段测试报告。2.1.进度回顾 版本/时间计划开始时间实际开始时间计划完成时间实际完成时间加班增加资源B12007.7.22007.7.22007.7.52007.7.5否否B22007.7.162007.7.162007.7.192007.7.19否否B32007.7.232007.7.232007.7.252007.7.24否2
5、 个人日B42007.7.282007.7.292007.7.312007.7.311 个人 1 天2 个人日B52007.8.12007.8.22007.8.62007.8.3否2 个人日B62007.8.42007.8.42 个人 1 天2 个人日B72007.8.52007.8.51 个人 1 天1 个人日B8B92007.8.92007.8.92007.8.102007.8.10否2 个人日B10合计1 个人 6 天11个人日2.2.测试执行 此次测试严格按照项目计划和测试计划执行, 按时完成了测试计划规定的测试对象的测试。针对测试计划规定的测试策略,在测试执行中都有体现,在测试执行过
6、程中,依据测试计划和测试用例,对系统进行了完整的测试。2.3.测试用例 2.3.1.功能性系统实现的主要功能,包括查询,添加,修改,删除。 系统实现的次要功能,包括为用户分配酒店,为用户分配权限,渠道酒店绑定,渠道RATE 绑定,权限控制菜单按钮。需求规定的输入输出字段,以及需求规定的输入限制。2.3.2.易用性操作按钮提示信息正确性,一致性,可理解性限制条件提示信息正确性,一致性,可理解性必填项标识输入方式可理解性中文界面下数据语言与界面语言的一致性3.测试环境 3.1.软硬件环境 硬件环境应用服务器数据库服务器客户端硬件配置CPU: Intel(R) Celeron(R) CPU 2.40
7、GHz stepping 01 Memory: 1048256k HD:ST380817AS 80G SATACPU : Intel(R) Celeron(R) CPU 2.40GHz stepping 01 Memory: 1048256k HD:ST380817AS 80G SATACPU:Intel(R) Celeron(R) CPU 2.40GHz stepping 01 Memory: 1048256k HD:ST380817AS 80G SATA软件配置OS:CentOS 4.2 JDK 1.5.0_06 Apache 2.2.0 Tomcat 5.5.15OS:CentOS 4.
8、2 MySQL 5.0.17 LinuxWindow 2000 Professional ( SP2 )IE6.0.2900.2180.xpsp_sp2网络环境10M LAN10M LAN10M LAN3.2.网络拓扑 4.测试结果 4.1.Bug趋势图 此次黑盒测试总共发布 11个版本, B1B5 为计划内迭代开发版本(针对项目计划的基线标识) ,B6-B11为进行的回归测试版本,bug版本趋势图如下图所示: 第一阶段,增量确认测试。 时间从 2007 年 7 月 2 日到 2007 年 8 月 3 日。从 Bug 趋势图中可以看出,每个版本的bug数基本维持在60个左右。 B1:从图中看到
9、B1 共有33个BUG,因为 B1 版本有一个功能模块在 B2 版本才开始测试,B1测试模块相对较少,所以B1版本 bug相对较少。 B2:由于 B1 中的一个功能模块增加到 Build 2 中进行测试,这一版本除了对 B1 中的BUG进行验证同时对B1 进行了回归测试,所以 B2中的 bug 数相对 B1出现了明显的增长趋势。B3:B3 版本因为有 B2 版本的 bug 验收测试,以及 B1,B2 的回归测试,共发现 67 个bug,和B2 基本保持一致。 B4:B4 版本 bug 数有一个下降的趋势,是因为 B4 版本推迟发布,新增加了测试人员参与测试,对系统不够熟悉,以及测试时间紧张,部
10、分测试用例没有执行,测试覆盖度不够,所以发现bug数呈下降趋势。 B5:B5 版本bug数又有一个增加的趋势,主要是由于开发功能模块多,该版本需求定义不明确。第二阶段,BUG验证和功能回归确认测试。 时间从 2007 年 8月 4 日到 2007 年 8 月 14 日。B6 和 B7 进行了回归测试,B8 没有进行回归测试,只验证了 B1B7 的bug。B6:进行第一轮回归测试,发现的 bug 数为 33 个,遗留一个问题,为数据字典种类默认值问题。B7:进行第二轮回归测试,第一次回归测试没有涉及到权限控制菜单按钮的测试,在本次回归测试的时候,重点进行了这个方面的测试,又发现了大量的权限相关的
11、 bug。B8:B8 没有进行全面的回归测试,只验证了 B1B7 未通过验证的 bug,所以该版本的bug数明显比较少。B9:B9 版本进行了全面的回归测试,同时重点测试了权限控制,所以发先的 bug 数又呈现上升的趋势。测试发现44 个bug,严重级别的bug为 14 个,严重级别的 bug集中在权限控制上, 功能性严重 bug没有发现, 说明权限控制依旧不稳定, 但是系统功能已经稳定。B10:B10版本验证了B9 版本发现得bug,没有进行全面的回归测试。B10 版本在验证bug的时候,重现打开Bug6个,新增 bug2个,重新打开 bug有 5 个为严重级别 bug,是关于权限控制的 b
12、ug,而新发现的bug,1 个为严重级别的 bug,也是属于权限控制的。说明,权限控制还存在着问题, 需要修改权限管理bug,重新发布版本后进行全面的回归测试。B10版本新发现的 bug详细分析见遗留bug分析。B11:B11中验证了B1B10未验证的 bug,重点测试了权限控制,同时进行了查询,添加,删除,修改的功能测试,测试过程中未发现 bug。4.2.Bug严重程度 测试发现的 bug 主要集中在 normal 和 minor 阶段,属于一般性的缺陷,但是测试的时候,出现了68个严重级别的bug,出现严重级别的 bug主要表现在以下几个方面:系统主要功能没有实现;添加数据代码重复后,出现
13、的找不到页面的错误;多语言处理,未考虑非语种代码的情况;数据库设计未考虑系统管理员角色,导致用系统管理员进行操作的时候出现找不到页面错误;权限控制异常;严重级别bug按版本分布如下:由严重bug版本分布图可以看出, 严重级别的 bug版本趋势和 bug版本趋势基本是一致的,但是,在B7 和B9版本中年,严重级别的bug明显增多,主要原因是 B7 和 B9 版本测试了权限控制按钮功能,权限问题出现的严重级别的bug比较多。权限bug主要表现: 具有相应按钮操作的权限,页面无相应按钮,无法执行该功能;无相应按钮操作权限,页面有相应按钮,点击按钮能出现权限异常错误;有相应按钮操作权限,有相应按钮,执
14、行该功能出现权限异常错误;4.3.Bug引入阶段 由上图可以看出,主要为前台编码和页面设计方面的bug,占到了全部 bug的 2/3。4.4.Bug引入原因 由上图可以看出,主要为前、后台编码和易用性方面的 bug,占到了全部 bug的 2/3。4.5.Bug状态分布 由bug状态图可以看出,未解决的 bug有 4 个,主要是B8 中新提交的 bug,是关于用户管理的 bug,因为用户权限管理需要重新设计所以,该部分的 bug暂时没有解决。 5.测试结论 5.1.功能性 系统正确实现了通过数据字典管理基础数据的功能,实现了数据内容的多语言功能,实现了中英文界面。实现了基础数据管理,酒店集团管理,酒店基础信息管理,渠道管理,代理管理,用户管理的查询,添加,修改,删除的功能,系统还实现了将权限控制细化到菜单按钮的功能。系统在实现用户管理下的权限管理功能时,存在重大的缺陷,权限控制不严密,权限设计有遗漏。5.2.易用性 现有系统实现了如下易用性: 查询,添加,删除,修改操作相关提示信息的一致性,可理解性 输入限制的正确性 输入限制提示信息的正确性,可理解性,一致性 现有系统存在如下易用性缺陷: 界面排版不美观 输入,输出字段的可理解性差 输入缺少解释性说明 中英文对应的正确性 中英文混排 5.3.可靠性 现有系统的可靠性控制不够严密,很多控制
copyright@ 2008-2022 冰豆网网站版权所有
经营许可证编号:鄂ICP备2022015515号-1