版本验收测试总结报告.docx
《版本验收测试总结报告.docx》由会员分享,可在线阅读,更多相关《版本验收测试总结报告.docx(10页珍藏版)》请在冰豆网上搜索。
版本验收测试总结报告
版本验收测试总结报告
_SMAIL1.2.2.008_WINMO
文档版本号:
V1.0.0.0
文档编号:
文档密级:
保密
归属部门/项目:
系统测试部
产品名:
Link
子系统名:
手机终端
编写人:
袁文平
编写日期:
2008-11-28
卓望数码技术(深圳)有限公司版权所有
内部资料注意保密
修订记录:
修订版本号
修订人
修订日期
修订内容
V1.0.0.0A
袁文平
2008-11-28
初稿
V1.0.0.0B
曾文锋
2008-11-28
后续活动和建议
目录
1概述4
1.1上次报告的遗留问题4
1.2本次报告的范围4
1.3参考资料5
2测试记录6
2.1活动简述6
2.2测试环境6
2.3案例执行记录7
2.4缺陷记录7
3测试分析7
3.1测试覆盖情况分析7
3.2缺陷分析8
3.2.1缺陷收敛点分析8
3.2.2修复但没有验证缺陷分析9
3.2.3未修复缺陷9
3.3其它角色意见9
3.3.1项目组对遗留问题的意见9
3.3.2系统集成对遗留问题的意见9
3.3.3其它人员对遗留问题的意见9
4总结9
4.1后续活动和建议9
4.2结论10
1概述
莲蓬是集成手机网盘、通信、超市为一体的手机客户端软件.
其基本组成包括:
内部网元:
CPPS/CPORTAL/MGROUP/手机客户端(winmo)等
外部网元:
内容适配平台/网盘服务器/UC服务器/点卡服务器/彩铃平台等
本报告主要针对超邮手机客户端winmo版本
1.1上次报告的遗留问题
无
1.2本次报告的范围
●本次测试的版本号
本次测试版本为:
SMAIL1.2.2.008_WINMO
手机客户端包括如下Build的测试:
SMAIL1.2.2.008_WINMO_PRET_1__20081118_16.08.26
●本次测试的范围
SMAIL1.2.2.008_WINMO版本是在SMAIL1.2.2.008的基础上对WINMO系统进行开发,按《超级邮箱商业版产品需求规格说明书_v1.2.0.0.doc》产品需求定义的全部功能,并对所有功能进行测试,主要验证的功能需求点如下:
需求序号
需求描述
优先级别
客户端功能需求
安装部署、卸载
后台环境的部署、客户端的安装与卸载
用户注册
注册功能
用户登陆
登录功能
客户端升级
升级功能
本地
手机本地功能
网盘
网盘管理功能
共享
共享管理功能
联系人
网络通讯录管理功能
通讯设置
短信过滤功能
任务管理器
管理上传下载任务及已下载任务
退出系统
退出系统
系统日志
报表日志、后台日志
通用功能
通用功能案例检查
服务器的返回码,返回异常情况的测试
高
本次测试按照《SMAIL1.2.2.008_WINMO_系统测试案例》进行测试。
●本次测试的目标
确认SMAIL1.2.2.008_WINMO手机终端实现的功能已覆盖需求。
●报告的审核人
测试组长:
吴丽芳
项目经理:
倪小辉
产品经理:
符传明
系统架构师:
黄科峰
1.3参考资料
参考资料如下列表
文档名称
作者
存放路径
备注
《超级邮箱商业版产品需求规格说明书_v1.1.0.0(20080121).doc》、《近期修改的界面说明(2008-07-30).doc》
符传明等
\\asp-sz-vss2005\product_market$\01_产品开发\02版本级文档\06超级邮箱客户端\02产品需求
VSS中
《接口规格说明书_超级邮箱系统1.2.2.0_内容呈现平台和手机终端分册.doc》等
许行洲
\\asp-sz-vss2005\product_market$\01_产品开发\02版本级文档\06超级邮箱客户端\03架构设计\接口规格说明书
VSS中
《SMAIL1.2.2.008_系统测试案例.doc》
刘洋
\\asp-sz-vss2005\systemtest$\05产品验收部\04测试工作\02手机终端组\02超级邮箱\1.2.2.008\02案例
VSS中
2测试记录
2.1活动简述
时间:
2008-11-20—2008-11-26
地点:
终端基地实验室
测试人员:
曾文锋、吴景、袁文平
测试内容和范围:
SMAIL1.2.2.008_手机终端对应的所有需求
测试步骤:
参见TD^Subject\超级邮箱\SMAIL1.2.2.008_WM^
缺陷提交库:
TD:
VT_MOBILE_TERMINAL
2.2测试环境
●功能测试环境
应用
测试环境
DATABASE
对应操作系统
Winmo手机
机型:
DopodD600
DopodS1
无
wince
CPORTAL
10.1.3.223
10.1.3.224
模拟器:
10.1.3.213
10.1.3.81
Linux
CPPS
10.1.3.223
10.1.3.81
Linux
MGROUP
10.1.3.223
模拟器:
10.1.3.182
10.1.3.81
Linux
●功能测试环境和实际环境的差异及风险
功能测试环境和实际环境的差异
对应风险
功能测试环境使用的是非集群环境
✓无法正确获知实际的现网环境对手机终端的影响
2.3案例执行记录
测试类别
版本/Patch
Build
测试轮次
时间范围
总案例数
执行案例数
计划工时
实际工时
功能测试第一轮(完整测试)
SMAIL1.2.2.008
SMAIL1.2.2.008_WINMO_PRET_1
1
2008-11-20~2008-11-26
288
288
120
120
2.4缺陷记录
严重级别
本次测试发现的问题
仍然Open数目
尚未处理的数目New
修复但没有验证数据Fixed
拒绝的缺陷数目Rejected
挂起的缺陷数据Suspended
verylow
1
0
0
1
0
0
low
12
1
0
11
0
0
medium
82
29
6
47
0
0
high
13
3
2
8
0
0
veryhigh
0
0
0
0
0
0
Total
108
33
8
67
0
0
3测试分析
3.1测试覆盖情况分析
一、进行了基本功能验证
充分性分析:
1、本次测试针对莲蓬的整体基本功能进行的验收测试,进行了全量案例的测试,有较高的充分性。
2、由于本次验收测试侧重在基本功能部分,界面修改的部分测试不是很充分。
风险分析:
1、界面部分的测试不够充分;
2、本次验收仅进行一轮完整功能测试,由于项目该版本已经废弃,测试工作也终止了,很多问题开发人员停止修改,测试提出的问题修改的问题也没有验证。
3、很多案例无法覆盖测试,如:
音频视频无法播放,界面功能无法验证。
3.2缺陷分析
3.2.1缺陷收敛点分析
SMAIL1.2.2.008_手机终端mobile的缺陷收敛点分析图:
从上图可以看到:
本版本遗留问题较多,open的问题和new的问题占了很大的比例,这是因为该项目的这个版本已经废弃,开发人员不再修改问题,测试人员也没有对修改的问题进行验证,开发方面不再提交版本。
3.2.2修复但没有验证缺陷分析
由于项目该版本废弃,开发人员已经开始了浏览器实现的开发,没有再提交新的版本,还存在67个fix的问题无法验证。
3.2.3未修复缺陷
TD上的缺陷没有挂起的,还存在8个new的问题和33个open的问题,但由于项目已经废弃该版本,开发人员已经开始了浏览器实现的开发,不再跟踪这些问题。
3.3其它角色意见
暂无
3.3.1项目组对遗留问题的意见
项目组已经废弃了该版本,开发和测试人员已经开始了浏览器实现版本的工作,对现存TD中的缺陷不再跟踪。
3.3.2系统集成对遗留问题的意见
无
3.3.3其它人员对遗留问题的意见
无
4总结
4.1后续活动和建议
目前Mobile手机客户端目前的遗留问题有108个,其中:
4级以上级别的缺陷有13个,以下7个问题对用户使用有较大的影响的严重问题:
●问题1:
SESSION过期后,没有进行获取SESSION处理——mobile客户端问题,没有考虑心跳时间大于服务器设置的过期时间,需要进行优化处理
●问题2:
没有实现批量上传功能——提供给开发方的需求文档不清晰,未实现此功能需求。
●问题3:
音频视频在线不能播放——mobile支持的流媒体格式适配平台不能正确提供,正在跟踪处理
●问题4:
音频视频界面功能需求没按需求实现——mobile客户端音频视频界面没按需求实现,导致有些功能需求不能测试
●问题5:
文件不能进行下载——mobile客户端文件下载在选择目录后就提示错误,很大部分功能受到影响
●问题6:
通讯录无法现实分组共享——提供给开发方的需求文档不清晰,未实现此功能需求。
●问题7:
短信过滤功能没有实现——mobile客户端问题
综上,本版本有以下主要功能需求:
批量上传、下载、音视频在线播放功能、短信过滤都没有实现,且SMAIL1.2.2.008规划一些其它需求也没有实现完全,这些未实现的需求导致30%的案例无法覆盖测试,整个测试无法测试充分。
由于该项目的这个版本已经废弃,项目组已经开始开发用浏览器实现的新版本,项目经理要求截断此版本,不再进行新轮次的测试,测试人员提出108个缺陷,67个Fixed问题不进行验证,未解决的41个问题,开发也不再修复,不提交新版本进行测试。
基于以上情况:
未实现需求的功能较多,且遗留问题数量达到108个,严重影响用户使用,本版本测试不通过。
本次测试过程中存在以下问题:
1、提供给开发方的需求不明确
2、开发方和产品经理的沟通不够,对需求有不清晰的未能及时沟通
建议:
1、因WINMOBILE是外包项目,需要有效的需求沟通交流方式,提供更细化的需求给开发方
2、开发方应及时和产品经理进行需求沟通。
4.2结论
测试类别
遗留问题数目
严重遗留问题数目
建议
结论
功能测试
108
13
遗留问题不再跟踪,该版本废弃
不通过
最终测试不通过的版本:
SMAIL1.2.2.008_WINMO_PRET_1__20081118_16.08.26