CRM系统软件测试报告Word下载.docx
《CRM系统软件测试报告Word下载.docx》由会员分享,可在线阅读,更多相关《CRM系统软件测试报告Word下载.docx(14页珍藏版)》请在冰豆网上搜索。
✓点击某个菜单后出现“Thepagecannotbedisplayed”或者返回异常错误。
✓进行某个操作(增加、修改、删除等)后,出现“Thepagecannotbedisplayed”或
者返回异常错误
✓当对必填字段进行校验时,未输入必输字段,出现“Thepagecannotbedisplayed”或者返回异常错误
✓系统定义不能重复的字段输入重复数据后,出现“Thepagecannotbedisplayed”或
1.5测试对象
略
1.6测试阶段
系统测试
1.7测试工具
Bugzilla缺陷管理系统
2测试概要
crm系统项目后台管理系统测试从2018年11月15日开始到2018年11月23日结束,共持续7天,测试功能点95个,执行2385个测试用例,平均每个功能点执行测试用例13.7个,测试共发现427个bug,其中严重级别的bug68个,无效bug44个,平均每个测试功能点2.2个bug。
crm系统项目总共发布11个测试版本,其中B1—B5为计划迭代开发版本(针对项目计划的基线标识),B6-B8为回归测试版本。
计划测试版本,B1—B4测试进度依照项目计划时间准时完成测试并提交报告,其中B4版本推迟一天发布版本,测试通过增加一个人日,准时完成测试。
B5版本推迟发布2天,测试增加2个人日,准时完成测试。
B6-B11为计划外回归测试版本,测试增加5个工作人日的资源,准时完成测试。
crm系统测试通过Bugzilla缺陷管理工具进行缺陷跟踪管理,B1—B4测试阶段都有详细的
bug分析表和阶段测试报告。
2.1测试执行
此次测试严格按照项目计划和测试计划执行,按时完成了测试计划规定的测试对象的测试。
针对测试计划规定的测试策略,在测试执行中都有体现,在测试执行过程中,依据测试计划和测试用例,对系统进行了完整的测试
2.2测试用例
2.3.1功能性
系统实现的主要功能,包括查询,添加,修改,删除。
系统实现的次要功能,包括为用户分配酒店,为用户分配权限,渠道酒店绑定,渠道
RATE绑定,权限控制菜单按钮。
需求规定的输入输出字段,以及需求规定的输入限制
2.3.2易用性
操作按钮提示信息正确性,一致性,可理解性限制条件提示信息正确性,一致性,可理解性必填项标识
输入方式可理解性
中文界面下数据语言与界面语言的一致性
3测试环境
3.1.1软硬件环境
硬件环境
应用服务器
数据库服务器
客户端
硬件配置
CPU:
Intel(R)Celeron(R)CPU2.40GHzstepping01
Memory:
1048256kHD:
ST380817AS80G
SATA
CPU:
Intel(R)
Celeron(R)CPU2.40GHzstepping01Memory:
ST380817AS80GSATA
Intel(R)Celeron(R)CPU2.40GHzstepping01Memory:
1048256k
HD:
ST380817AS80G
软件配置
OS:
CentOS4.2JDK1.5.0_06
Apache2.2.0
Tomcat5.5.15
CentOS4.2
MySQL5.0.17Linux
Window2000Professional(SP2)IE6.0.2900.2180.xpsp_sp2
网络环境
10MLAN
3.1.2网络拓扑
应用服务器、数据库服务器
4测试结果
4.1Bug趋势图
此次黑盒测试总共发布11个版本,B1—B5为计划迭代开发版本(针对项目计划的基线标识),B6-B11为进行的回归测试版本,bug版本趋势图如下图所示:
第一阶段,增量确认测试。
时间从2018年11月15日到2018年11月19日。
从Bug趋势图中可以看出,每个版本的
bug数基本维持在60个左右。
B1:
从图中看到B1共有33个BUG,因为B1版本有一个功能模块在B2版本才开始测试,B1测试模块相对较少,所以B1版本bug相对较少。
B2:
由于B1中的一个功能模块增加到Build2中进行测试,这一版本除了对B1中的
BUG进行验证同时对B1进行了回归测试,所以B2中的bug数相对B1出现了明显的增长
趋势,
B3:
B3版本因为有B2版本的bug验收测试,以及B1,B2的回归测试,共发现67个
bug,和B2基本保持一致。
B4:
B4版本bug数有一个下降的趋势,是因为B4版本推迟发布,新增加了测试人员参与测试,对系统不够熟悉,以及测试时间紧,部分测试用例没有执行,测试覆盖度不够,
所以发现bug数呈下降趋势。
B5:
B5版本bug数又有一个增加的趋势,主要是由于开发功能模块多,该版本需求定义不明确。
第二阶段,BUG验证和功能回归确认测试。
时间从2018年11月20日到2018年11月23日。
B6和B7进行了回归测试,B8没有进
行回归测试,只验证了B1-B7的bug。
B6:
进行第一轮回归测试,发现的bug数为33个,遗留一个问题,为数据字典种类默认值问题
B7:
进行第二轮回归测试,第一次回归测试没有涉及到权限控制菜单按钮的测试,在
本次回归测试的时候,重点进行了这个方面的测试,又发现了大量的权限相关的bug。
B8:
B8没有进行全面的回归测试,只验证了B1-B7未通过验证的bug,所以该版本
的bug数明显比较少。
B9:
B9版本进行了全面的回归测试,同时重点测试了权限控制,所以发先的bug数又呈现上升的趋势。
测试发现44个bug,严重级别的bug为14个,严重级别的bug集中在权限控制上,功能性严重bug没有发现,说明权限控制依旧不稳定,但是系统功能已经稳定。
B10:
B10版本验证了B9版本发现得bug,没有进行全面的回归测试。
B10版本在验证
bug的时候,重现打开Bug6个,新增bug2个,重新打开bug有5个为严重级别bug,是关于权限控制的bug,而新发现的bug,1个为严重级别的bug,也是属于权限控制的。
说明,权限控制还存在着问题,需要修改权限管理bug,重新发布版本后进行全面的回归测试。
B10版本新发现的bug详细分析见遗留bug分析。
B11:
B11中验证了B1—B10未验证的bug,重点测试了权限控制,同时进行了查询,
添加,删除,修改的功能测试,测试过程中未发现bug。
4.2Bug严重程度
测试发现的bug主要集中在normal和minor阶段,属于一般性的缺陷,但是测试的
时候,出现了68个严重级别的bug,出现严重级别的bug主要表现在以下几个方面
✓系统主要功能没有实现
✓添加数据代码重复后,出现的找不到页面的错误
✓多语言处理,未考虑非语种代码的情况
✓数据库设计未考虑系统管理员角色,导致用系统管理员进行操作的时候出现找不到页面错误
✓权限控制异常
严重级别bug按版本分布如下:
由严重bug版本分布图可以看出,严重级别的bug版本趋势和bug版本趋势基本是一致的,但是,在B7和B9版本中年,严重级别的bug明显增多,主要原因是B7和B9版本测试了权限控制按钮功能,权限问题出现的严重级别的bug比较多。
权限bug主要表现:
✓具有相应按钮操作的权限,页面无相应按钮,无法执行该功能
✓无相应按钮操作权限,页面有相应按钮,点击按钮能出现权限异常错误
✓有相应按钮操作权限,有相应按钮,执行该功能出现权限异常错误
4.3Bug引入阶段
由上图可以看出,主要为前台编码和页面设计方面的bug,占到了全部bug的2/3。
4.4Bug引入原因
由上图可以看出,主要为前台编码和易用性方面的bug,占到了全部bug的2/3。
4.5Bug状态分布
由bug状态图可以看出,未解决的bug有4个,主要是B8中新提交的bug,是关于用
户管理的bug,因为用户权限管理需要重新设计所以,该部分的bug暂时没有解决。
5测试结论
5.1功能性
系统正确实现了通过数据字典管理基础数据的功能,实现了数据容的多语言功能,实现了中英文界面。
实现了基础数据管理,权限管理,上云企业基础信息管理,上云服务商基础信息管理,上云产品管理,用户管理的查询,添加,修改,删除的功能,上云企业评分查询等系统还实现了将权限控制细化到菜单
按钮的功能。
系统在实现用户管理下的权限管理功能时,存在重大的缺陷,权限控制不严密,权限设计有遗漏。
5.2易用性
现有系统实现了如下易用性:
✓查询,添加,删除,修改操作相关提示信息的一致性,可理解性
✓输入限制的正确性
✓输入限制提示信息的正确性,可理解性,一致性
现有系统存在如下易用性缺陷:
✓界面排版不美观
✓输入,输出字段的可理解性差
✓输入缺少解释性说明
✓中英文对应的正确性
✓中英文混排
5.3可靠性
现有系统的可靠性控制不够严密,很多控制是通过页面控制实现的,如果页面控制失
效,可以向数据库插入数据,引发错误。
现有系统的容错性不高,如果系统出现错误,返回错误类型为找不到页面错误,无法
回复到出错前的状态
5.4兼容性
现有系统支持window下的IE8以上的浏览器和google浏览器,支持linux系统下的IE浏览器和火狐浏览器。
现有系统未进行其他兼容性测试。
5.5安全性
现有系统控制了以下安全性问题:
✓把某一个登录后的页面保存下来,不能单独对其进行操作不进行登录
✓直接输入某一页面的Url能否打开页面并进行操作不应该允许。
现有系统未控制以下安全性问题:
✓用户名和密码应对大小写敏感
✓登陆错误次数限制
6分析摘要
6.1覆盖率
此次测试,所有测试用例都是在中文界面下执行,未在英文界面下执行,测试不包括英文界面下的测试,也不包括正对英文翻译的测试。
此次测试,部分页面需求描述无明确的定义,对输入限制无详细定义,无明确的测试依据,在测试过程中,测试是根据输入字段含义,测试人员理解,以及和项目经理,开发人员沟通获得测试依据,无法保证测试依据的正确性和完整性,因此,没有进行完整的,正确的无效数据的测试,测试覆盖率不够,无法保证测试的有效性和正确性
下面为此次测试测试用例覆盖率分析图:
6.2遗留缺陷的影响
1.缺陷描述:
上云企业基础信息添加页面,“距离”字段无