1、3.6 BUG单BUG单是指测试人员在测试完成后,向开发人员提交的BUG汇总报告。开发人员确认并修改BUG后,必须填入修改意见并将BUG单返回给测试人员以验证是否修改成功。3.7 测试循环测试循环是指从软件单元/模块的第一次提交测试到本编码阶段结束中间经过的所有的有关的测试行为和过程。其开始的标志是本阶段的第一份提交的送测单,其结束标志是测试总结或测试报告的提交和审批通过。4参考文献1.计算机软件测试文件编制规范,GB 9386-882.,(美)Bourne,K.C.著,机械工业出版社,1998.5.3.软件开发规范,航空工业标准6464-905测试与开发的配合目前,质量部已经装备测试工作专用
2、的工具“辅助测试系统1.0”,因此测试与开发的配合将结合此工具展开;并且质量部已经有自己专用的测试服务器,从而可以大体上做到测试与开发独立进行。本文件中规定的流程就是按照这个思想形成。由于目前公司自主开发的软件产品基本上都是基于客户机/服务器模式,因此,要做到测试与开发独立进行,只需要把软件用到的数据库分开安装到不同的服务器上就可以了,从而保证开发与测试不会产生数据冲突。如果是采用B/S结构的软件,只需要在开发部的服务器上建立一个可执行包就可以了;在必要的情况下,也可同时在质量部服务器上建立可执行包。在此系统的基础之上,又采取用Microsoft SourceSafe6.0来对开发文档和软件进
3、行管理,从而减少了文档传递失误的机会,提高了测试自动化的程度,也降低了测试人员的工作量。5.1 文档和软件保存目录公司目前采取的开发方式,用SourceSafe来对整个开发的产品来进行管理,因此对于测试人员来说,不必再单独对开发文档、软件模块进行复制和保存,测试服务器上的共享目录只是用于保存最终发行的软件产品。共享目录在项目开始阶段由测试小组的负责人在质量部专用的测试服务器上建立,并由测试负责人在整个项目期间进行维护。共享目录的内容包括评审通过的最终软件(源代码和可执行文件)、各种开发文档(包括测试文档)。最终的共享目录TsPrjName的结构如下所示:具体的建立规则如下:1假设项目中文简称为
4、PrjName, 则共享目录的名字必须是TsPrjName。如项目简称为“宝开二期”,则共享目录的名字就是“Ts宝开二期”。2子目录“开发文档”用于存放开发人员传递到测试组的所有“完整的”开发文档,这里的“完整”指经过公司技术委员会评审确认的、能独立向所有使用者发行的文档。当不同的文档使用人员对其内容产生歧义时,都以这里保存的文档作为仲裁依据。其二级子目录可以分为规格说明、需求分析、概要设计等等,由开发人员和测试人员商量决定。3子目录“最终软件”存放已经通过内部评审的软件,如果软件是分为几个阶段开发的,并且每个阶段的产品都要发行给用户,则测试员必须备份每个阶段最终发行给用户的产品。5.2 辅助
5、工具的使用辅助工具目前有两个:辅助测试系统1.0和Microsoft SourceSafe6.0。5.2.1 辅助测试系统1.0辅助测试系统1.0是一个B/S系统,通过IExplorer访问,建立在质量部服务器上,由质量部维护,使用人员通过在IE地址栏中输入http:/qa-bck/test/访问。辅助测试系统的用户必须在该系统中具有用户账号,否则无法使用。辅助测试系统中的使用人员共分为六种身份:测试主管,测试员,项目经理,程序员、领导和超级用户。相同的用户账号只能具有一种身份,所有的用户只能由超级用户建立。通过辅助测试系统,用户可以查阅到当前项目中程序员的送测信息和模块的送测情况,可以随时了
6、解程序中仍然存在的BUG信息,并可以看到查询出来的信息的统计结果。除了领导和超级用户身份以外,对于其它身份登陆的用户,系统具有自动提醒功能,既登陆后系统可以自动提醒用户现在需要处理的一些工作。所以,要求处于测试中的程序的相关人员,如项目经理、程序员、测试主管和测试员等,每天都必须在不同时段登陆本系统至少三次以上。5.2.2 Microsoft SourceSafe6.0使用SourceSafe6.0的主要作用在于能减少文档的传递次数,从而能有效的降低文档的不一致性,提高文档的及时性和有效性。开发人员使用SourceSafe6.0可以保证所有人员包括测试人员看到的是同一个版本的文档,从而避免理解
7、上的偏差。SourceSafe6.0的服务器建立在开发部门的服务器上,由开发部门维护,测试人员对其数据库的访问由项目经理控制。测试人员通过计算机上的SourceSafe客户端对服务器上的数据库进行访问。测试人员在测试过程中形成的测试文档,也应当按照项目经理指定的目录保存在SourceSafe里面,这样既方便了同开发人员之间的交流,也使得所有项目产品有了一个统一的存放地点。对SourceSafe中保存的其他开发文档和软件产品,原则上测试人员都只能读而不能写,比如对于文档和软件产品只能使用“get last version”命令来进行阅读,测试人员在得到这些产品以后,都不必再把它们放回去。不同的测
8、试人员只能对他/她自己负责测试的部分具有读的权利,对于其它项目的软件产品和文档,不具有访问的权利。5.3 开发与测试配合的流程 开发人员在辅助测试系统中填写送测单,提交待测模块代码、可执行文件和相应的设计文档给项目经理确认。项目经理检查送测单上的内容后,执行确认工作,并将打包好的可执行代码发布到开发部服务器的SourceSafe中(如果是B/S结构的软件,要把可执行代码发布到IIS上),将相关的数据库发布到质量部服务器上。测试人员接受送测单后,从SourceSafe中获得程序代码,开始测试。测试包括两方面的内容:一是代码走查工作,其次是功能测试工作。代码走查以公司下发的编码规范及管理办法为检查
9、依据。如果在本次送测的某个模块中的代码走查中发现存在5个以上违反编码规范的地方,则将该模块返回给程序员重新送测,本模块的测试结束,继续下一个模块的测试。如果所有模块都不能通过代码走查工作,则本次测试全部结束,不必再进行下一步的功能测试。功能测试以公司下发的质量部测试管理办法为测试依据。测试人员应当严格按照管理办法上的相关规定开展工作,并认真完成BUG纪录的填写。完成测试后,将BUG单传递给测试主管确认。测试人员测试完成后,测试主管必须对BUG单执行“验证”过程,即检验BUG单上描写的BUG是否都是正确的。验证完以后,测试主管将BUG单返回给程序员。程序员对BUG单上的所有纪录都必须认真处理后,
10、再把BUG单连同修改完成的软件产品一起返回给测试员进行回归测试。对于具体的使用辅助测试系统的开发与测试配合的工作流程可以参见辅助测试系统使用手册(由开发2部负责编写,预计会在8月初完成),也可以参见qawangl软件测试测试流程图。6. 送测单 送测单用于开发人员向测试人员提交被测软件,由程序员填写并通过项目经理传递到测试人员。在辅助测试系统中,已经将送测单的填写集成进去了,这里给出送测单的主要元素及其填写方法。如果在辅助测试系统中的送测单的形式与这里列出的不同,请参考本文件的规定执行。送测单的形式如下所示:送 测 单项目名称送测模块送测阶段项目经理送测人送测日期版本号工程文件路径和名字可执行
11、文件路径和名字软 件配 置测试要求(重点):收测人收测日期6.1送测单的填写 其填写规则约定如下:1项目名称、送测内容、送测人和送测日期等四个字段由送测人填写。送测内容指的是本次送测的程序模块。在辅助测试系统中,项目名称和模块名称由项目经理加入,程序员在填写送测单时只需要选择就可以了;而送测人和送测日期两个字段系统可以根据用户登陆信息自动添加。2项目经理字段在项目经理确认了本送测单填写的所有内容都正确无误之后,由本人填写。在辅助测试系统中,项目经理要对送测单的处理方式做出选择,可供选择的项有不处理、打回和通过,还有一个备注字段可供项目经理填写个人意见。3送测阶段指的是当前测试的阶段,由程序员填
12、写。辅助测试系统中可供选择的项有单元测试、集成测试、系统测试、安装测试和发行测试等。这里的阶段由项目经理和测试员共同确定后,通知每一个程序员。在每个阶段中,对一个模块只产生一个送测单和BUG单,当送测单生成以后,BUG单随即产生,在整个阶段中,开发人员和测试人员都只用这一张BUG单来交流。4“工程文件路径和名字”和“可执行文件路径和名字”两个字段由程序员填写,项目经理必须检查确认这两个字段所填写的信息是否都是准确无误的。工程文件路径和名字是指送测的模块在SourceSafe中的路径和具体的模块名字。可执行文件路径指的是:如果本次送测的模块要用IE打开,请填写浏览器地址或超级联接地址;如果是ex
13、e文件,请填写获取的路径和文件名称。5版本号字段请填写本次送测的模块的版本号。单元测试中,版本号指的是本次送测的模块的窗体的统一版本号;其他测试中,请填写本次送测的工程的版本号。6软件配置字段的填写内容有两个,一是本模块的相关设计文档的位置、源代码的位置等;二是运行本模块需要的一些软件设置,如环境参数设置、动态联接库版本等。软件配置字段由送测人和开发经理共同确定并填写。7测试重点是指开发人员或客户在使用本模块时,对本模块在稳定性,可靠性,易用性等任何本模块应该满足的一些要求,比如对于“酒楼收银”模块,数据计算的正确性是应该首先达到的最基本的要求。测试重点由送测人和项目经理共同确定,并由送测人填
14、写。8收测人和收测日期字段由被指定测试本模块的测试员填写。在辅助测试系统中,此部分是一个单独的模块,由测试员操作。6.2 工作流程开发人员填写送测单,提交待测模块和相应的详细设计文档给项目经理确认。在辅助测试系统中,项目名称和模块名称都由超级用户在系统管理模块中添加,程序员在填写送测单时只需要从列表框中选择就可以了。但送测模块的版本号由程序员自己填写,而且必须填写。项目经理确认所填信息都正确无误,并且把可执行文件在开发服务器上发布,数据库文件同时发布到开发服务器和测试服务器上,对模块进行简单的试用之后,签字送测。上述过程中任何一步出现问题,项目经理都可把测试单打回给程序员,进行重新送测。测试员
15、在辅助测试系统的“送测单接收”模块中收到送测单。测试员确认需要的文档资料和程序,签收后根据测试重点开始测试,并填写BUG单。如果这不是本模块的第一次送测,测试员还应当验证一下上一次的BUG是否都已经全部处理了。7BUG单 每一个送测单将对应的产生一个BUG单。BUG单由测试员填写后交开发人员处理,最终返回到测试员手中。BUG单模块也已经集成到辅助测试系统当中了,这里给出BUG单的主要元素及其填写方法。如果在辅助测试系统中BUG单的形式与这里列出的不同,请参考本文件的规定执行。BUG单的形式如下:Bug 单被 测模 块送测版本测试员验证人最后修改日期修订版本BUG描述BUG类别BUG级别BUG处
16、理备注1.7.1 BUG单的填写在辅助测试系统中,一旦测试员接收了送测单,对应的BUG单会自动产生,因此在上面的BUG单中基本上测试员只需要填写BUG描述、BUG类别和BUG级别字段,而送测的程序员只需要填写修订版本和BUG处理就行了。填写规则规定如下:1BUG描述和BUG级别两个字段由测试员填写。1)对发现的BUG按测试发现的顺序排序。BUG描述可以分三种形式:一是BUG;二是问题;三是建议。BUG和问题的描述中,操作步骤和BUG现象用“=”加以区分,“=”以前是重复本问题的步骤,以后是测试员认为不对的地方。建议的描述可以直接写出来,不必用“=”加以区分。2)对每一个BUG的评级工作由测试员
17、完成并由验证人加以确认。BUG按其严重性级别来评级,共分A、B、C、D、E五级(参见本文第9.3节表1中的描述),在系统提供的列表框中选择。对于问题和建议,它们的级别应当选择为“未定义”。2对于每一条BUG,除了判定它的级别以外,还要判定BUG的技术分类:功能性错误、系统错误、逻辑错误、用户界面错误、数据错误和编码错误等,以及问题和建议,由测试员根据实际情况做出选择。3BUG处理一栏由开发人员填写。对BUG描述一栏中的每一条,开发人员都要做出相应的回答并给出是否已修改或者暂不修改的理由。对BUG和问题的回答有三种方式:一是“已修改”;二是“暂不修改”;三是“不存在”。对于后两种回答都必须给出相
18、应的理由。一个BUG是否暂不修改必须由项目经理审查并确认。对于建议的回答有两种方式:“采用”和“不采用”,可酌情给出解释或不给出解释。4备注字段在开发人员向测试人员解释自己的回答时由开发人员填写,也可在测试人员向开发人员详细解释BUG描写的时候填写。5开发人员处理完BUG单上所有的BUG后,要将修订BUG后的模块和BUG单分别传递给项目经理和测试人员,这时如果不是进入下一个测试阶段,就不必再填写新的送测单,只需要重新发布新的代码和可执行文件。但必须更新BUG单上的“修订版本”字段。6测试员接到程序员处理过的BUG单后,首先验证新的模块版本号是否和BUG单上的“修订版本”字段相同。如果是,则测试
19、员验证是否按照处理方法的描述解决了所有问题;否则将BUG单再次返回给程序员。其次,测试员要测试模块是否产生了新的BUG。7对于确定已经修改成功的BUG,测试员要将BUG的状态置为“CLOSE”;如果一张BUG单上的所有纪录都已经CLOSE,则测试人员可以将本BUG单的状态置为CLOSE,这样此张BUG单将退出测试流程,辅助测试系统提供选项可使BUG单再重新进入测试流程;此时测试员应当保存模块的修订版本,并口头通知开发人员。7.2 工作流程测试员在辅助测试系统的BUG单填写模块中,验证程序的版本号是否和BUG单上的送测版本号相同(如果不是第一次送测,这里应当对比修订版本号)。不相同就把BUG单打
20、回给程序员。如果不是第一次送测,测试员根据BUG的处理情况验证程序员对上一次测试所发现的BUG的修改情况,并把已经修改完成的BUG的状态置为CLOSE。否则继续下一步。测试员根据送测单上的测试重点设计或选取测试用例。测试员根据测试用例做测试,将发现的BUG现象填入对应的BUG单中。测试员提交BUG单给测试主管进行验证并由测试主管传递给程序员。程序员确认BUG,并将处理意见填入BUG纪录的备注字段中。程序员返还BUG单给测试人员。如果本BUG单已经CLOSE,则由测试人员口头通知程序员,否则重复以上的步骤。8测试阶段的结束测试以本阶段所有已开发模块都经过测试,并且仍存在的BUG数量满足国标中的规
21、定为本阶段的结束,也可以根据实际情况由软件开发部门的经理、项目经理和测试主管共同确定本阶段是否结束。本阶段的测试工作结束后,测试主管(或其指定人员)应该提交一份本阶段的测试报告。内容包括对当前版本软件已测模块的测试评估,已发现BUG的分类统计,未修改的BUG及其原因,当前的测试工作的总结等。测试报告提交后,项目经理、开发部门经理、质量部经理以及公司的技术委员会将审阅或签字确认,并将成为软件是否可发行的参考资料之一。9. 备注以下内容属于流程之中的一些原则和测试工作中的一些做法,写在这里供开发人员参考。9.1 开发阶段与测试阶段测试阶段对应于开发过程中的编码阶段,每一个相对独立的编码阶段都可以形
22、成一个测试阶段,比如单元测试、集成测试等。编码阶段的划分由开发组和项目经理负责,各阶段的完成标志应当明确的告知测试组,以利于测试组在测试计划中分阶段的安排测试工作、设计测试用例和调配测试资源。9.2 待测模块的组合与测试原则开发组应当首先完成软件的核心模块,和软件的主界面设计。每一次软件送测时,把已完成并通过开发组内部测试的模块联编入核心模块中送测,已经通过测试的模块不应当被取出。测试组在测试时,重点测试本次送测新添加的模块。对于已测试过的模块,可以酌情加以发挥性的测试,但在所有的测试阶段之后,每个模块至少保证测试过两遍以上。9.3 BUG的分类评级原则BUG 的大小、严重性在不同的系统中相差
23、很多,最严重的BUG 会让开发者立刻放下手中的其他事来改正它们。不太严重的则是在时间和资源允许的情况下才去理会它们。BUG按其严重性可以分为以下几类:表1 按严重性划分BUG严重等级描 述A极严重1)可能有灾难性的后果或是会出人命的2) 故意留有程序后门B严重产生错误的结果,导致系统不稳定的问题1)造成数据库不稳定的错误;2)系统崩溃,无法继续操作3)列在说明中的需求未在最终系统中实现4)业务流程不正确C中等的不正确的,但不会影响系统稳定性的1)过程调用或其它脚本错误;2)打印错误或打印出来的结果与用户的要求不一致3)系统刷新错误;4)产生错误结果,如计算结果错误等5)功能的实现有问题。如在系
24、统实现的界面上,一些可接受输入的控件点击后无作用;对数据库的操作不能正确实现6)编码时数据类型、长度定义错误的;7)对用户的使用有操作顺序上的限制8)虽然正确性不受影响,但系统性能和响应时间受到影响D一般性的不正确的,但是没有特别损害的输出,或者使系统使用起来不太方便的错误1)系统的提示语不明确,不简明2)滚动条无效3)可编辑区和不可编辑区不明显,4)光标跳转设置不好,鼠标(光标)定位错误;5)对库记录指针,方向键无效时没有变灰6)界面不一致,或界面不正确E轻微的1)日期或时间初始值错误(起止日期、时间没有限定)2)按钮或标签上有拼写错误的单词、不正确的大小写 除了按严重性来分类,BUG还可以
25、按技术种类分为以下几类:表2 按技术种类划分BUG类 别功能性错误列在说明中的需求没有在最终系统中达到系统错误存在或产生于所开发的系统之外的软硬件错误逻辑错误程序运行起来不像要求的样子用户界面错误字段和控件标号不一致,功能提供的不一致等数据错误访问数据库时出错编码错误源代码中存在的语法错误测试错误测试者误操作却认为发现了问题 在执行本规定时,BUG的评级原则按表1中的描述进行。9.4 国标中有关BUG数量的描述向用户提交软件进行验收时,对于软件中存在的BUG数量有如下的规定:1程序中不存在未改的A、B级BUG;C级BUG的数量每千行源代码(KLOC)中不超过1个;D、E级BUG的数量每千行源代
26、码(KLOC)中不超过2个;对于随机出现的BUG的数量也必须考虑。2在交付给用户的文档资料中,允许存在的BUG数量按以下方法计算:用程序的千行源代码(KLOC)数量除以25,所得数加上3即为文档中允许存在的最大BUG数量。例如,如果程序的千行源代码(KLOC)的数量是1000,即该程序有1 000 000行源程序,则与该程序相关的文字资料中允许的最大BUG数就是(1000/25+3=)43个。9.5 测试阶段的划分本节的详细描述可在公司文档软件测试文档编制规范中找到。实际的测试过程可能不会严格区分各个阶段,写在这里仅供参考。1. 单元测试(Unit testing) 将开发成功的各个子模块单独
27、测试。2. 集成测试(Integrate testing)相互关联的一个子系统重的所有子模块已开发完成,全部联编后进行测 试。3. 确认测试(Verification testing)确认测试又称有效性测试。它的任务是验证软件的有效性,即验证软件 的功能和性能及其它特性是否与用户的要求一致。4. 系统测试(System testing)安装测试、恢复测试、安全测试、运行测试、操作手册测试等任何用户需要打交道的东西。修 改 纪 录 表编 号GL/ZLN002版 本1.0拟 制日 期2000/8/4审 批修改人修改日期修改章节简要描述2000/11/21版本1.1第5.1,5.2,6.1,7.1,和9.3节减轻测试人员文档工作量,重新命名共享目录,简化BUG和送测单的填写,细化BUG评级分类规定2001/3/14版本1.2第5,6,7章调整测试流程2001/07/13版本2.0全文结合辅助测试系统1.0对测试流程进行修改
copyright@ 2008-2022 冰豆网网站版权所有
经营许可证编号:鄂ICP备2022015515号-1