单元测试规范 初学者必看.docx
《单元测试规范 初学者必看.docx》由会员分享,可在线阅读,更多相关《单元测试规范 初学者必看.docx(25页珍藏版)》请在冰豆网上搜索。
![单元测试规范 初学者必看.docx](https://file1.bdocx.com/fileroot1/2022-11/26/bed44856-ab5e-4c72-a6eb-9347bda78bba/bed44856-ab5e-4c72-a6eb-9347bda78bba1.gif)
单元测试规范初学者必看
应用软件单元测试规范版本:
1.0
北京XX出品有限公司
版本说明
日期
版本号
发布说明
作者
批准人
签字
岗位
目录
1引言..........................................................3
1.1编写目的..................................................................................................................3
1.2背景..........................................................................................................................3
1.3定义..........................................................................................................................3
1.4参考文档..................................................................................................................3
2单元测试........................................................4
2.1单元的定义..............................................................................................................4
2.2角色工作体系..........................................................................................................4
2.3单元测试规程..........................................................................................................4
2.4单元测试工具..........................................................................................................5
2.5测试的目录结构......................................................................................................5
2.6测试代码的书写规范..............................................................................................6
2.7测试单元的文件组成及命名规范..........................................................................6
2.8单元测试的实施......................................................................................................6
3测试结果提交和验收..............................................8
3.1单元测试工作产品提交..........................................................................................8
3.2单元测试工作产品验收规范..................................................................................9
附录一:
代码审查单...............................................10
附录二:
单元测试Bug清单..........................................13附录三:
驱动模块(类)模板........................................14附录四:
单元测试实例介绍..........................................17
1引言
1.1编写目的
1.1.1编写目的
本文档规定了应用软件系统和部分系统平台模块的单元测试方法和步骤、测试用例的设计方法、测试代码的书写规范、流程以及单元测试的产品提交和验收规范,目的在于控制单元测试的质量,加强项目的质量管理,从而提高整个产品的质量。
1.1.2适用范围
主要是应用软件的单元测试、部分系统平台软件模块测试。
1.1.3预期读者
本文档的预期读者为项目的项目经理、产品经理、系统软件主研人员、应用软件主研人员、高级测试人员等。
1.2背景
XXXXXX系统软件平台是项目的重要组成部分,主要是依托GUI子系统、分析子系统和数据采集子系统的硬件环境,共同为高层的应用软件提供必要的软、硬件功能支持,并为应用软件开发人员提供必要的开发环境和测试环境。
本规范的提出和制订旨在为软件单元测试提供依据和支持。
1.3定义
被测模块:
需要进行模块级测试的应用软件系统的一个单元或模块,也称被测单元测试单元:
用于对被测模块进行单元级测试,由源代码、测试脚本和输入数据等构成的程序单元
1.4参考文档
[1]CppUnitDocumentation
[2]gprofhomepage
[3]gcovhomepage
[4]应用软件编写规范
[5]DemoUnit测试单元[6]单元测试培训材料[7]单元测试总结报告
2单元测试
2.1单元的定义
对于结构化的编程语言,程序单元指程序中定义的函数或子程序。
单元测试是指对函数或子程序所进行的测试。
对于面向对象的编程语言,程序单元指特定的一个具体的类或相关的多个类。
单元测试主要是指对类方法的测试。
2.2角色工作体系
角色
职责
测试主管
审查单元测试过程,对测试结果进行评估。
根据单元测试发现的缺陷提出变更申请。
测试工程师
对单元代码进行检查,设计单元测试用例,加载运行测试用例,记录和分析测试结果,
填写单元测试Bug清单。
开发工程师
设计测试需要的驱动程序和桩模块,以及辅助测试工具的开发。
配置管理员
管理测试需要的资源,包括软硬件环境,版本管理和Bug管理。
2.3单元测试规程
包括静态的代码审查和动态测试两个阶段。
代码审查是按照《代码审查单》中的条项对单元模块进行逐项检查,并填写《单元测试Bug清单》。
《代码审查单》的格式见附录一,《单元测试Bug清单》见附录二。
动态测试阶段首先编写驱动模块(或主类)和桩模块后,在驱动模块和桩模块中设计相应的测试用例,对所有的测试用例进行统一编号,在源代码中进行注释标识。
测试用例应该覆盖单元模块的所有功能项,如果单元模块有性能、余量等其它测试特性要求,则必须设计相应的测试用例测试这些特性,编制完测试用例后,把测试用例提交给配置管理员或测试主管进行审查,审查没有通过则根据审查意见进
行修改,直到审查通过后测试人员加载测试用例,编译运行得到测试结果,比对测试结果,如果发现错
误或Bug则需要填写《单元测试Bug清单》并提交给测试经理和配置管理人员。
在进行功能测试时,可以利用其它测试工具进行内存溢出分析、代码覆盖率分析、代码性能测试等。
2.3.1代码审查
要求:
根据《代码审查单》中的要求,对被测试单元进行逐项检查,检查后在对应的条项后进行标记,发现问题后,填写《代码单元测试Bug清单》并提交。
2.3.2测试用例
测试用例是测试数据及与之相关的测试规程的一个特定的集合,它是为验证被测试程序(为测试路径或验证是否符合特定需求)而产生的。
测试用例设计用于白盒测试和黑盒测试。
白盒测试进入的前提条件是在测试人员已经对被测试对象有了一定的了解,基本上明确了被测试软件的逻辑结构。
过程是通过针对程序逻辑结构设计和加载测试用例,驱动程序执行,检查在不同点程序的状态,以确定实际的状态是否与预期的状态一致。
白盒测试主要是对被测试对象进行如下测试项目:
1、对程序模块的所有独立的执行路径至少覆盖一次;
2、对所有的逻辑判定,真假两种情况都至少覆盖一次;
3、在循环的边界和运行界限内执行循环体;
4、测试内部数据结构的有效性等。
白盒测试达到的目标:
语句覆盖率达到100%,分支覆盖率达到100%,覆盖程序中主要的路径,主要路径是指完成需求和设计功能的代码所在的路径和程序异常处理执行到的路径。
黑盒测试是要首先了解软件产品具备的功能和性能等需求,再根据需求设计一批测试用例以验证程序内部活动是否符合设计要求的活动。
黑盒测试主要是对被测试对象进行如下测试项目:
1、测试程序单元的功能是否实现;
2、测试程序单元性能是否满足要求(可选);
3、可选的其它测试特性,如边界、余量、安全性、可靠性、强度测试、人机交互界面测试等。
黑盒测试达到的目标:
程序单元正确地实现了需求和设计上要求的功能,满足性能要求,同时程序
单元要有可靠性和安全性。
2.4单元测试工具
项目规定使用以下测试工具实现应用软件系统单元测试和子系统集成测试,以及部分系统平台软件模块的相关测试。
·CppUnit:
正确性测试和功能测试
·ccmalloc:
动态内存访问检查
·gcov:
代码覆盖率分析
·gprof:
代码性能分析
2.5测试的目录结构
建议将模块单元的测试代码组织在一个单独的目录中,作为模块单元源代码目录的一个子目录,取名为TestDemo。
在测试代码目录下分布创建5个子目录分别对应PCLinux、PXA250评估板、IXP425评估板、PXA255目标板、IXP425目标板的测试目录,用于构建、执行单元测试、管理测试日志和测试报告。
2.6测试代码的书写规范
其规范见附录三。
2.7测试单元的文件组成及命名规范
每个测试单元由测试代码文件、程序主函数文件和编译运行脚本文件组成,单元测试完成之后还生成一系列测试报告,这些测试报告将与模块单元一起提交。
为了便于管理,对组成测试单元的各个文件及测试生成的测试结果和测试报告文件的命名都从被测类/模块派生而来。
假定被测类为DemoClass,测试单元包含如下文件及其所处目录位置如下所述:
1)测试单元文件TestDemo/DemoClassTest.h:
测试类头文件TestDemo/DemoClassTest.cpp:
测试类实现文件TestDemo/DemoUnitMain.cpp:
测试类主函数
TestDemo/$(运行平台)/Makefile:
用于特定运行平台的makefile文件
TestDemo/$(运行平台)/DemoTestDemo:
为特定运行平台生成的可执行程序
其中运行平台为:
PCLinux、PXA250评估板、PXA255目标板、IXP425评估板、IXP425目标板5种。
2)测试结果文件
TestDemo/$(运行平台)/DemoUnit-O0.log:
采用-O0编译的正确性测试结果文件TestDemo/$(运行平台)/DemoUnit-O2.log:
采用-O2编译的正确性测试结果文件TestDemo/$(运行平台)/DemoUnit-O3.log:
采用-O3编译的正确性测试结果文件
TestDemo/$(运行平台)/DemoUnit.ccmalloc:
内存检查结果文件
TestDemo/$(运行平台)/DemoClass.gcov:
DemoClass.cpp的代码覆盖率结果文件TestDemo/$(运行平台)/DemoUnit.gprof:
DemoUnit被测单元的代码性能分析结果文件
其中运行平台为:
PCLinux、PXA250评估板、PXA255目标板、IXP425评估板、IXP425目标板
2.8单元测试的实施
按照单元测试规程进行实施,进行代码审查和动态测试。
1)单元测试或集成测试涉及的源程序三种:
被测类/被测单元、已通过的类/桩模块、测试单元。
只需对被测类进行测试设计、进行代码覆盖率分析和代码性能分析,用多种优化编译选项进行
编译和测试;
2)不需为已通过的类/桩模块进行测试设计,这些模块单元和测试单元本身都进行代码不需要使用ccmalloc、gcov和gprof等工具要求的编译选项和编译优化选项进行编译,也不需要为其生成.gcov代码覆盖率报告。
3)对于各种运行平台下,都需要使用-O0,-O2,-O3三种编译优化选项对测试单元进行编译,并
运行一个测试单元中的所有测试用例,生成测试报告
2.8.1单元模块正确性测试
进行单元正确性测试的过程是将被测单元源程序、测试单元源程序和测试主函数程序放到一起编译产生可执行程序,并在目标平台上运行可执行程序,即可获得测试结果报告。
对应上述的DemoClass被测类的正确性测试过程的命令序列为:
$(CC)$(OPT)-cDemoClass.cpp;编译被测类
$(CC)-cDemoClassTest.cpp
$(CC)-cDemoUnitMain.cpp
$(CC)-oDemoTestDemoDemoClass.oDemoClassTest.oDemoUnitMain.o-lstdc++-lcppunit
./DemoTestDemo;运行测试
./DemoTestDemoDemoUnit$(OPT).log;生成单元测试结果文件,该文件随模块一起提交
其中,变量CC为C/C++编译器,如gcc/g++;$(OPT)为编译优化选项。
项目要求每个被测模块在用-O0,-O2和-O3三种编译选项进行编译,并分别进行正确性测试。
2.8.2单元内存溢出检查
项目要求用ccmalloc内存检查工具对被测单元进行内存溢出检查,测试过程与正确性测试相似,只是要求被测单元代码的编译和最后的连接命令前添加ccmalloc命令,如下命令序列所示:
ccmalloc$(CC)$(OPT)-cDemoClass.cpp
$(CC)-cDemoClassTest.cpp
$(CC)-cDemoUnitMain.cpp
ccmalloc$(CC)-oDemoTestDemoDemoClass.oDemoClassTest.oDemoUnitMain.o-lstdc++
-lcppunit
./DemoTestDemo;运行测试,产生内存检查结果显示于屏幕
./DemoTestDemo2>DemoUnit.ccmalloc;运行测试,产生内存检查结果文件用于提交
2.8.3测试代码覆盖率分析
项目要求用gcov工具对测试单元的代码覆盖率进行分析,测试单元的代码覆盖率分析的命令序列如下所示:
$(CC)$(OPT)-c-g-fprofile-arcs-ftest-coverageDemoClass.cpp-fprofile-arcs
;对被测代码使用-g-ftest-coverage等编译选项
$(CC)-cDemoClassTest.cpp
$(CC)-cDemoUnitMain.cpp
$(CC)-oDemoTestDemoDemoClass.oDemoClassTest.oDemoUnitMain.o-lstdc++-lcppunit
./DemoTestDemo;运行测试
gcovDemoClass.cpp>DemoClass.gcov.sum;对每个被测源程序生成2个覆盖率结果文件
;DemoClasscpp.gcov和DemoClass.gcov.sum
;前者包含源代码每条语句的执行计数,
;后者包含一个该文件覆盖率统计
catDemoClass.gcov.sumDemoClass.cpp>DemoClass.gcov;合并以上两个代码覆盖率文件,
;最后提交合并后的文件
2.8.4模块单元代码性能分析
项目还要求用gcov工具对测试单元的代码性能进行分析,测试单元的代码性能分析的命令序列如下所示:
$(CC)$(OPT)-c-g-pgDemoClass.cpp;对被测类使用-g-pg等编译选项
$(CC)-cDemoClassTest.cpp
$(CC)-cDemoUnitMain.cpp
$(CC)-pg-oDemoTestDemoDemoClass.oDemoClassTest.oDemoUnitMain.o-lstdc++-lcppunit
./DemoTestDemo;运行测试
gprof-pgDemoTestDemo>DemoUnit.prof;产生性能分析结果文件
3测试结果提交和验收
3.1单元测试工作产品提交
项目要求随模块提交2.8列出的5种测试单元文件和6种测试结果和测试报告文件,而每增加一种被测类,提交时要求增加相应的测试类文件和代码覆盖率报告文件。
3.1.1提交的测试产品
1对于每个被测类的测试文档产品
·测试类头.h文件
·测试类实现.cpp文件
·PCLinux平台和2个XScale平台(2个PXA25X平台或2种IXP425平台)下的代码覆盖率.gcov
文件
2对于每个测试单元的测试文档产品
·测试类主函数.cpp文件
3对于每种运行平台的测试文档产品
对于每个测试单元需要提在PCLinux平台和2个XScale平台(2个PXA25X平台或2种IXP425平台)下的以下文档
·Makefile文件
·内存检查结果.ccmalloc文件
·代码覆盖率分析.gcov文件
·代码性能分析.gprof文件
·利用-O0,-O2,-O3三种编译优化选项编译被测代码时产生正确性测试结果.log文件
4单元测试总结报告.report
TestDemo/DemoUnit.report:
总结单元测试情况,需要手工书写。
内容包括4个部分:
·被测类名:
列出所有被测类的类名
·测试用例:
按被测类列出所有测试用例及其描述信息,主要是用例源程序代码和相应的注释信息。
·正确性测试报告:
列出每种运行平台下测试单元运行的测试结果。
从具有最高编译选项并且通
过了全部测试用例的测试报告中拷贝
·代码覆盖率测试结果:
列出测试单元在任意平台下运行时,被测类的代码覆盖率信息。
从相应被测类的.gcov文件中拷贝。
一个Demo单元测试总结报告请参考DemoUnit.report[9]。
3.1.2测试产品提交方式
单元编码/测试人员应该在所有测试项目完成之后,删除所有无关的临时文件,仅留下需要提交的项目,然后将TestDemo目录作为一个整体保留其目录结构进行提交。
最后手工完成一个文本格式的单元测试总结报告。
3.2单元测试工作产品验收规范
项目的模块单元提交时,要对-O0、-O2和-O3三种编译优化的正确性测试报告.log文件、每个被测类/被测源文件的代码覆盖率结果.gcov文件和内存检查结果.ccmalloc文件。
通过的准则如下:
1)正确性测试结果文件:
在所有运行平台下,至少在一种编译优化选项下通过了全部的测试用例,保证测试用例覆盖了单元模块中的所有功能点;
2)其它测试特性结果文件:
在所有运行平台下,测试覆盖该模块所要求的其它测试特性并测试通过;
3)内存检查结果文件:
在所有运行平台下,运行所有测试用例之后未发生内存泄漏;
4)代码覆盖率文件:
在所有运行平台下,每个被测类/被测文件的可执行语句的代码覆盖率达到
100%;
4)每一个单元测试Bug清单都处于一个明确的状态,不能改正的必须给出详细的解释说明;
5)单元测试工作产品的验收采用同级评审的方法,由评审组决定测试是否通过,来保证单元测试的质量和软件产品的质量。
附录一:
代码审查单
代码审查单
检查大项
检查小项
是否
编程风格检查
按照代码编写规范,该缩进的地方(如配对出现的语句、嵌套的IF语句、
类声明定义等)否已正确地缩进?
□
程序代码布局结构清楚吗?
□
注释准确并有意义吗?
在每一个模块之前,是否有注释说明,描述该模块
的输入/输出、参数、功能处理和其调用的外部模块以及该模块是否有使用限制等?
□
是否有多余的资源定义和宏定义?
□
头文件是否使用了ifndef/define/endif预处理块?
□
程序结构和模块功能定义清楚吗?
□
是否遵循该语言的指令编写格式?
□
注释的行数不少于代码总行数的1/5吗?
□
注释说明和代码功能一致吗?
□
错误处理分支信息表达清楚吗?
□
每一个模块单元的圈复杂度都小于10吗?
□
模块内做到了高内聚、模块之间达到了低藕合吗?
□
模块的扇出不超出7-9之间吗?
□
屏蔽了没有明确含义的输入和按键吗?
□
常量、变量、类、数据结构等命名有意义吗?
□
函数接口检查
实参和形参的个数、属性和次序一致吗?
□
对另一个模块的每一次调用:
全部所需的参数是否已传送给每一个被调用
的模块?
被传送的参数值是否正确设置?
□
函数功能是否齐全?
□
函数返回值类型正确吗?
□
return语句是否返回指向“栈内存”的“指针”或者“引用”?
□
函数的返回值是否全面反应了各种状态和结果?
□
程序语言检查
动态连接库和外部设备接口驱动程序使用正确吗?
□
动态分配的指针是否在不使用之后删除,并释放内存?
□
调用