手机黑盒测试测试方案与测试报告样本.docx

1、手机黑盒测试测试方案与测试报告样本 学号：08202138 班级：B7082021 专业：软件工程 姓名：申金萍手机黑盒测试测试方案和测试汇报1、介绍手机作为专用消费类电子产品需要进行以下测试：可靠性测试（对于硬件则是RQT；对于软件则是field trial）；标准符合性测试（FTA）；互操作性测试（IOT）；安全性测试（安规测试）；强度测试等。1.1编写目标1.因为现在软件规模越来越大，一个人或少数多个人已经不可能在一定时间内完成一个软件，所以软件开发过程越来越复杂，层次越来越深。这就造成开发人员之间沟通有了一定隔阂。所以，软件测试越来越有单立出来必需和关键性。 2. 因为软件开发过程复杂

2、性，软件肯定存在着无数Bug。而且大多数是在软件上市前必需处理，而开发者有不定能发觉这些问题，故而测试就显得很必需。测试是开发成功必需保障。 3. 因为软件开发层次性，所以开发结果很可能和初衷不一样，这就需要测试者去发现这些差异。所以，测试是软件成功关键确保。 4. 软件不仅要实现部分功效，更要完善它性能。这就需要测试人员对软件进行评测，从而不停地完善软件性能。 1.2项目背景 在计划制订好以后，在实施之前，必需将测试所需人力资源，硬件资源，软件资源，文档资源和环境和人文资源准备充足 。1.3术语 时间相关性能测试可分为长时间保持测试和限定时间反应测试。 次数相关性能测试是测试终端反复稳定地进

3、行某项功效能力。 并发测试关键是测试终端同时进行多项业务时表现出处理能力。 负载测试关键是验证系统负载工作能力。2、测试概要2.1测试用例设计测试项目测试方法判定标准手机呼叫拨通率测试 在同一地点、同一网络运行商条件下，分别拨打当地1860或1001各50次，测试机和对比机、座机（市话和长话）相互拨打50次，统计拨不通或拨号失败次数，计算出对应拨通率。主叫 被叫主叫 被叫要求拨通率在95以上。测试机（移动）对比机(移动)测试机（移动） 对比机（联通）测试机（联通）对比机(移动)测试机（联通） 对比机（联通）测试机（移动） 对比机（当地座机） 测试机（移动） 对比机（当地座机）测试机（联通） 对

4、比机（外地座机） 测试机（联通） 对比机（外地座机）手机来电接通率测试 在同一地点、同一网络运行商条件下，分别用座机（市话和长话）、不一样型号手机（联通和移动卡）分别拨打测试机（分别用联通和移动）各50次，统计测试机来电接通和接通失败次数。测试机（移动）对比机(移动)测试机（移动） 对比机（联通）要求接通成功率在95以上。测试机（联通）对比机(移动)测试机（联通） 对比机（联通） 对比机（当地座机）测试机（移动） 对比机（当地座机）测试机（移动）对比机（外地座机）测试机（联通）对比机（外地座机） 测试机（联通） 手机信号强度测试 具体信号强度可用S1000*#*#1705#DEBUG模式进行测

5、试，画面会进入目前所处网络情况，总共有四页（00、01、02、03），在00页中第一行第二列中显示目前所处绝对信道及信号强度（总共有六位数，后面两位代表信号强度（RX），数值越大、信号越强，通常弱信号值在20数值以下）。 测试时状态分为静止和移动，信号分为强信号（RX:4060）、中信号（RX:2040）、弱信号（RX:020）三档次。 手机通话音质测试 音质测试关键是在同一地点、同一网络运行商条件下，在每个静止测试点和每个移动测试点测试通话时必需有回音和背景音，在每个静止测试点，主测机和主测机，主测机和对比机相互进行通话一分钟，检测通话中必需有回音和背景音；在移动测试点，主测机和座机，对比机

6、和座机进行通话一分钟，检测必需有回音和背景音，呼叫次数暂定为5次，呼叫距离最少相隔100米，根据以下判定标准进行判定，主测手机和对比手机必需全部对第四对比机进行对比通话，并统计等级。等级判定标准0完全不能了解讲话。1有很大回音或很大背景杂音或二者全部有，难以听懂。2部分回音，没有杂音，或有部分杂音，没有回音通话质量不好。3没有回音、能够听懂但有大背景杂音。4时而有较小背景杂音或较小回音，不过能够听清楚对方讲话。5通话声音清楚，声音完全不失真。注：判定为03级者为不合格。长时间通话测试 在同一地点、同一网络运行商条件下，在每个静止测试点和每个移动测试点测试通话时必需有回音和背景音，在每个静止测试

7、点，主测机和主测机，主测机和对比机相互进行通话十分钟以上，检测通话过程中必需有回音和背景音；在移动测试点，测试机和座机，对比机和座机进行通话十分钟以上，检测必需有回音和背景音，呼叫次数暂定为5次，呼叫距离最少相隔100米，根据以下判定标准进行判定，主测手机和对比手机必需全部对第四对比机进行对比通话，并统计等级。测试内容： 同上1、长时间（10分钟以上）连续通话能力。统计掉线率（次数可自定）2、通话过程中回音问题。统计（比率）3、通话过程中音责问题，见判别标准并统计。4、通话时语言连续性问题，见判别标准并统计。5、接通电话后，对方听不到您声音，或您听不到对方声音现象几率问题。统计（比率）。6、通

8、话过程中音量大小。（主观统计）铃声音量/通话音量测试 设置手机来电默认为提醒铃声，并将音量调到最大值，测试手机铃声大小；手机拨通电话后，将通话音量调到最大值，测试手机通话声音大小。发音孔距分贝仪10厘米和30厘米时测试手机铃声大小，发音孔距分贝仪10厘米处测试手机通话声音大小。判定标准：铃声音量在10cm处大于90dB，在30cm处大于85dB。通话音量在10厘米处大于75dB。通话音量在10cm处大于70dB。信息收、发送成功率误码率测试使用用户卡或和CMU200相连接测试手机短信功效，每台手机收、发短信各100次，手机应能正确显示收、发内容，并应有正确短信发送成功提醒、短信收到提醒和短信溢

9、出提醒。100次，确保每次通讯过程成功完成，短信使用期限和使用期设置相符，和不一样型号手机和利用不一样网络进行测试，要求100成功率（排除网络原因）实际待机(通话)时间测试通话时间测试可分人工和机械两种，机械测试可用不一样信道或不一样信号强度来测试手机最大通话时间，人工采取不一样通讯网络（如：虚拟网等）来测试手机通话时间；待机时间测试可分两种情况：登陆网络、不登陆网络两种按该机型最小电池容量，手机待机时间和通话时间需满足下面两个条件：待机时间应大于100小时，连续通话时间应大于80分钟。识卡能力测试能识别通常一般卡（如中国移动全球通、神州行和对应充值卡和中国联通一般卡、如意通和充值卡等)，若卡

10、开通了STK功效，手机也应能够识别（现有容量有16K、32K、64K等）。即能够在要求搜寻网络时间内寻求到正确网络，且待机状态时网络运行商名称显示正确。 对于STK卡增值功效不能覆盖手机原有菜单功效，比如不能和WAP功效有冲突，不能覆盖WAP功效菜单等考虑市场需求和手机设计方面，如有需求需要手机需识别STK卡等特殊卡，手机需能识别号码识别能力测试不一样手机设计识别号码位数不一样，像和SAGEM企业合作生产系列手机其能够识别手机号码后8位（即假如两个电话号码后面8位全部相同，则此手机不能将其区分），实际选择后8位相同测试卡对手机进行测试，确定手机识别能力测试手机识别电话号码位数，其位数应和手机设

11、计位数相同呼叫业务功效测试1、实现国际功效 电话电话卡开通了拨打国际电话功效后，其手机拨打过程以下：“+”或“00”加上“国家代码”加上“区号”再加上“电话号码”。不然会听到语音提醒：“对不起，您没有申请国际长途业务”2、紧急呼叫 许可用户在以下紧急情况时（无SIM卡、SIM卡被锁、键盘加锁、手机被锁、找不到正确网络等）能够拨打112实现紧急呼叫。网络开通国际长途业务后，手机能实现国际通话功效，手机在左侧罗列情况下能实现紧急呼叫国家政策、法律法规符合性测试1、ROC测试：用综测仪设定搜寻网络，手机屏幕不能显示“ROC”等和国家政策法规不符文字；2、铃声歌曲版权测试：振铃音乐不能有国歌、革命歌曲

12、和还在受法律保护中国民族乐曲、民歌等。符合政策、法规要求，不侵权显示性能测试人工测试手机屏幕显示质量，能不能正常实现其显示功效（如显示缺划、背景度等）显示画面清楚，不能出现缺显、显示不清等现象，背景灯亮度能实现正常调整2.3测试环境和配置操作系统：windows XPCpu：Intel(R) Core(TM)2 Duo T5470内存：1G2.4测试方法v 正确性测试 1. 正确性测试又称功效测试，它检验软件功效是否符合规格说明。 2. 测试基础方法是结构部分合理输入（在定义域内） ，检验是否得到期望输出。 3. 因为定义域是一个连续区间， 所以不可能枚举全部可能值， 那么等价测试就很必需了

13、（将定义域分成若干个等价区间） 。 4. 等价区间概念可表述以下： 记（A, B）是命题f(x)一个等价区间，在（A, B）中任意取x1进行测试 。假如f (x1) 错误，那么f (x) 在整个（A, B）区间全部将犯错。 假如f (x1) 正确，那么f (x) 在整个（A, B）区间全部将正确。v容错性测试 容错性测试是检验软件在异常条件下行为（输入不一样数据类型或定义域之外值进行测试） 。v边界性测试 因为边界一直是比较敏感地方，而且是程序员最轻易忽略地方，所以，这种测试也往往最轻易奏效。 v性能和效率测试 性能和效率测试关键是测试软件运行速度和对资源利用率。 性能和效率测试中很关键一项是

14、极限测试，因为很多软件系统会在极限测试中瓦解。 v易用性测试 易用性测试没有一个量化指标，主观性较强。这关键是从End User角度去考虑软件是否会有一定使用缺点。假如对此有任何见解，能够向Team Leader反应或和用户责任人直接交流。 3、测试结果及缺点分析3.1测试实施情况和统计Title 标题通常会描述出目前要实施case是哪个功效模块，能实现怎样一个操作。标题下面有目前caseID号和软件版本号，如 Phonebook-Memory Save-Selected memory is Phone and SIM ID: EK Version: 1.1.0 2 Description 整

15、体地描述这个case测试目标，能实现什么功效。比如： The purpose of this test case is check out that the phone number can be saved to phonebook when selected memory is Phone and SIM. 3 Required test environment and accessories 必需测试环境和附件。测试环境包含硬件环境和软件环境。比如：HW, ESIM，Headset. 4 Precondition 描述实施case前提条件。比如： Select memory in use

16、 to be Phone and SIM. Return to the Idle State. 5 Action 具体描述实施case时每一步操作。通常每一步操作全部对应着一个期望中结果。实施时可参照下面期望结果。比如： Start the procedure to add a new item to the Phonebook. Enter some name and press Ok. Enter some number such as 12345 and press Ok. 6 Expected result 描述实施该case期望中结果，和上面操作Action是相对应。比如： Name

17、: query is displayed. Number: query is displayed. Saved to phone memory information note is shown. Phone goes to detailed memory screen。 3.2缺点统计和分析Title: 标题是Error Report中很关键一部分，它要求简单明了地对Error作一个整体描述，让不知道这个Error人看了以后能够很清楚地知道这是个怎样Error。记得曾经有些人提过“3W1H”概念。也就是说，标题里面应该包含What is the error, When will the er

18、ror appear, Where may the error appear and How to make the error appear. 在Title后面，通常要写上Feature Group名字。 比如： Title: Call register: The phone doesnt remain in the same state after rejecting a call when viewing items under full window choice items in call register. 8 Severity (Fatal/Severe/Minor): Seve

19、rity用来描述Error严重程度，有三个等级：较小、严重、致命。Fatal Error一般来说是指影响手机系统工作Error；Server Error指是影响用户操作或一些功效实现Error；Minor Error指是微小、不影响手机功效正常使用Error。通常Error如中文界面中某个字不正确，或是英文界面中某个单词拼写不正确；左右功效键显示有误等等全部属于Minor。若手机某个功效不能实现，如不能发短信，不能存电话号码，不能进行充电等等全部属于Severe；若手机开不了机，或常常死机、重启等则是Fatal。Severe和Fatal两种Error对手机来说全部是很严重问题，这个具体在做项目

20、时可请示项目经理。 比如：Minor 9 Reproducible Error? (Yes/No, if No, how many times?) in English UI or Chinese UI? 描述Error是否可再现，假如每次操作全部能出现，就是可再现。假如只是某一次操作才会出现这个Error，则是不可再现。假如是不可再现错误，要统计一共出现过多少次，是在英文界面还是在汉字界面。每个Error全部有发生前提条件和操作步骤。严格说，每个Error全部是可重现。不过，发觉这个Error人可能没有能够找到这个error完整前提条件或完整操作步骤。所以，现实中就有了很多不可重现Error

21、。对于一个手机而言，硬件，软件，语言包和SIM卡全部是其关键组成部分。所以，在一个手机中用某种SIM卡在某种语言UI上发现了某个Error，有可能在一样手机，一样SIM卡，不一样语言UI上就没有这个Error;也有可能在一样得手机上用不一样SIM卡也会没有这个Error；一样，在不一样手机上也有可能发现不了这个Error。总而言之一句话，是否可重现，要考虑手机硬件、软件版本、SIM卡类型、UI类型等等相关影响，不能简单说某个Error可重现，有时候要加上注释。 比如：Yes, both in English UI and Chinese UI 10 Precondition: 这里写是在错误发

22、生之前，手机状态。为了确保步骤简练，这里要尽可能具体。当然，也不要写很罗嗦。 11 How did you get to the state just before the error: 具体描述在错误发生之前你是怎样抵达这个状态，要具体到每一步操作。在这个部分，步骤一定要清楚、 简练， 让她人能够轻松了解并完成操作这个能够分成多个步骤来写， 如步骤1、步骤2、步骤3等。比如： 1. Menu - Call register - enter one of full window choice items; 2. Receive a call; 3. Reject it or remote en

23、d terminats the call. 12 Description of the error: 对发生错误描述，用简明易懂话具体地把这个Error描述清楚。注意多个关键点：“具体”、“简明”、“清楚易懂”。比如： After rejecting a call or having a missed call when viewing items under full window choice items in call register. The phone goes back to the full window choice items under call register. 13

24、 Description of expected result: 描述期望操作结果，这个在case中通常全部有说明，通常情况下，case实施结果就是期望操作结果。这里描述是，期望情况下，“应该”是什么结果.比如： The phone should remain in the same state just as before receiving a call. 14 SIM card used: 所用SIM卡是中国移动（CMCC）还是中国联通(CHN-CUGSM)。比如：CMCC 15 SW version and Language package: 所测手机软件版本号可经过在待机状态下按“*#0000#”来取得。 我们现在所测手机语言包大部分全部是C包，语言包可经过下面方法来取得： 把手机恢复出厂设置，进入短信编辑窗口，此时默认输入法假如是“拼音” ，则语言包为C包。比如：V5.20C 。4、测试结论1. 提交测试结果 2. 归还所借相关资源 3. 文档入库 4. 关闭测试项目 测试人员：申金萍