1、中华人民共和国国家标准计算机软件测试文件编制规范发布实施中华人民共和国电子工业部发布中华人民共和国国家标准计算机软件测试文件编制规范中华人民共和国电子工业部批准实施引言目的和作用本规范规定一组软件测试文件测试是软件生存周期中一个独立的关键的阶段也是保证软件质量的重要手段为了提高检测出错误的几率使测试能有计划地有条不紊地进行就必须要编制测试文件而标准化的测试文件就如同一种通用的参照体系可达到便于交流的目的文件中所规定的内容可以作为对测试过程完备性的对照检查表故采用这些文件将会提高测试过程的每个阶段的能见度极大地提高测试工作的可管理性适用对象及范围本规范是为软件管理人员软件开发人员和软件维护人员软
2、件质量保证人员审计人员客户及用户制定的本规范用于描述一组测试文件这些测试文件描述测试行为本规范定义每一种基本文件的目的格式和内容所描述的文件着重于动态测试过程但有些文件仍适用于其他种类的测试活动本规范可应用于数字计算机上运行的软件它的应用范围不受软件大小复杂度或重要性的限制本规范既适用于初始开发的软件测试文件编制也适用于其后的软件产品更新版本的测试文件编制本规范并不要求采用特定的测试方法学技术及设备或工具对文件控制配置管理或质量保证既不指明也不强制特定的方法学根据所用的方法学可能需要增加别的文件如质量保证计划本规范既适用于纸张上的文件也适用于其他媒体上的文件如果电子文件编制系统不具有安全的批准
3、注册机制则批准签字的文件必须使用纸张引用标准软件工程术语计算机软件开发规范计算机软件产品开发文件编制指南定义本章定义本规范中使用的关键术语设计层软件项的设计分解如系统子系统程序或模块通过准则判断一个软件项或软件特性的测试是否通过的判别依据软件特性软件项的显著特性如功能性能或可移植性等软件项源代码目标代码作业控制代码控制数据或这些项的集合测试项作为测试对象的软件项概述主要内容本规范确定了各个测试文件的格式和内容所提出的文件类型包括测试计划测试说明和测试报告测试计划描述测试活动的范围方法资源和进度它规定被测试的项被测试的特性应完成的测试任务担任各项工作的人员职责及与本计划有关的风险等测试说明包括三
4、类文件测试设计说明详细描述测试方法规定该设计及其有关测试所包括的特性还规定完成测试所需的测试用例和测试规程并规定特性的通过准则测试用例说明列出用于输入的具体值以及预期的输出结果并规定在使用具体测试用例时对测试规程的各种限制将测试用例与测试设计分开可以使它们用于多个设计并能在其他情形下重复使用测试规程说明规定对于运行系统和执行指定的测试用例来实现有关测试设计所要求的所有步骤测试报告包括四类文件测试项传递报告指明在开发组和测试组独立工作的情况下或者在希望正式开始测试的情况下为进行测试而被传递的测试项测试日志测试组用于记录测试执行过程中发生的情况测试事件报告描述在测试执行期间发生并需进一步调查的一切
5、事件测试总结报告总结与测试设计说明有关的测试活动这些文件同其他文件在编制方面的关系以及同测试过程的对应关系如图所示实施灵活性在中涉及软件测试的文件有测试计划及测试分析报告本规范中的八个测试文件是上述二个文件的补充和细化这样可使文件的书写更具体更有参照性其中测试计划可细化为本规范的测试计划测试设计说明测试用例说明及测试规程说明测试分析报告可细化为本规范的测试项传递报告测试日志测试事件报告及测试总结报告使用本规范的每个单位要规定测试阶段所应有的特定文件并在测试计划中规定测试完成后所能提交的全部文件对于不同的设计层或不同规模的软件所选文件的种类也可有所不同在所提供的每个标准文件中每一章的内容对于具体
6、的应用和特定的测试阶段可以有所增减不仅可以调整内容还可以在基本文件集中增加另外的文件任何一个文件都可以增加新的内容并且某章若无可写的内容则可不写但须保留该章的编号使用本规范的每个单位应该补充规定对内容的要求和约定以便反映自己在测试文件控制配置管理和质量保证方面所用的特定方法设备和工具附录参考件中将叙述文件编制实施及使用指南图测试文件与测试过程的关系总体要求以下将叙述各个测试文件的书写格式及内容对于每一个文件而言各章应按指定的次序排列补充的章可以放在最后或放在批准一章的前面如果该文件最后一章是批准的话如果某章的部分或全部内容在另一文件中则应在相应的内容位置上列出所引用的材料引用的材料必须附在该文
7、件后面或交给该文件的使用者内容要求测试计划测试计划结构如表所示表测试计划测试计划名称引言测试项被测试的特性不被测试的特性方法项通过准则暂停标准和再启动要求应提供的测试文件测试任务环境要求职责人员和训练要求进度风险和应急批准下面给出每一章的详细内容测试计划名称本计划的第章为本测试计划取一个专用的名称引言本计划的第章归纳所要求测试的软件项和软件特性可以包括系统目标背景范围及引用材料等在最高层测试计划中如果存在下述文件则需要引用它们项目计划质量保证计划有关的政策有关的标准等测试项本计划的第章描述被测试的对象包括其版本修订级别并指出在测试开始之前对逻辑或物理变换的要求被测试的特性本计划的第章指明所有要
8、被测试的软件特性及其组合指明每个特性或特性组合有关的测试设计说明不被测试的特性本计划的第章指出不被测试的所有特性和特性的有意义的组合及其理由方法本计划的第章描述测试的总体方法规定测试指定特性组所需的主要活动技术和工具应详尽地描述方法以便列出主要的测试任务并估计执行各项任务所需的时间规定所希望的最低程度的测试彻底性指明用于判断测试彻底性的技术如检查哪些语句至少执行过一次指出对测试的主要限制例如测试项可用性测试资源的可用性和测试截止期限等项通过准则本计划的第章规定各测试项通过测试的标准暂停标准和再启动要求本计划第章规定用于暂停全部或部分与本计划有关的测试项的测试活动的标准规定当测试再启动时必须重复
9、的测试活动应提供的测试文件本计划的第章规定测试完成后所应递交的文件这些文件可以是前述八个文件的全部或者部分测试任务本计划的第章指明执行测试所需的任务集合指出任务间的一切依赖关系和所需的一切特殊技能环境要求本计划的第章规定测试环境所必备的和希望有的性质包括硬件通信和系统软件的物理特征使用方式以及任何其他支撑测试所需的软件或设备指出所需的特殊测试工具及其他测试要求如出版物或办公场地等指出测试组目前还不能得到的所有要求的来源职责本计划的第章指出负责管理设计准备执行监督检查和仲裁的小组另外指出负责提供的中指出的测试项和在中指出的环境要求的小组这些小组可以包括开发人员测试人员操作员用户代表数据管理员和质
10、量保证人员人员和训练要求本计划的第章指明测试人员应有的水平以及为掌握必要技能可供选择的训练科目进度本计划的第章包括在软件项目进度中规定的测试里程碑以及所有测试项传递时间定义所需的新的测试里程碑估计完成每项测试任务所需的时间为每项测试任务和测试里程碑规定进度对每项测试资源规定使用期限风险和应急本计划的第章预测测试计划中的风险规定对各种风险的应急措施如延期传递的测试项可能需要加夜班来赶上规定的进度批准本计划的第章规定本计划必须由哪些人姓名和职务审批为签名和填写日期留出位置测试设计说明测试设计说明如表所示表测试设计说明测试设计说明名称被测试的特性方法详述测试用例名称特性通过准则下面给出本说明每一章的
11、详细内容测试设计说明名称本说明第章给每一个测试设计说明取一个专用名称如果存在的话也可引用有关的测试计划中给出的名称被测试的特性本说明的第章规定测试项描述作为本设计测试目标的特性和特性的组合其他特性可以论及但不必测试方法详述本说明的第章将测试计划中规定的方法进行细化包括要用的具体测试技术规定分析测试结果的方法如比较程序或人工观察规定为选择测试用例提供合理依据的一切分析结果例如可以说明容错的条例如区别有效输入和无效输入的条件归纳所有测试用例的共同属性可以包括输入约束条件共享环境的要求对共享的特殊规程的要求及任何共享的测试用例间的依赖关系测试用例名称本说明的第章列出与本设计有关的每一测试用例的名称和
12、简要说明某个特定的测试用例可能在多个测试设计说明中出现列出与本测试设计说明有关的规程及其简要说明特性通过准则本说明的第章规定用于判别特性和特性组合是否通过测试的准则测试用例说明测试用例说明结构如表所示表测试用例说明测试用例说明名称测试项输入说明输出说明环境要求特殊的规程说明用例间的依赖关系由于测试用例可能被由多个小组长期使用的多个测试设计说明引用所以在测试用例说明中必须包含足够具体的信息以便重复使用下面给出本说明每一章的详细内容测试用例说明名称本说明的第章给本测试用例说明取一个专用名称测试项本说明的第章规定并简要说明本测试用例所要涉及的项和特性对于每一项可考虑引用以下文件需求说明书设计说明书用
13、户手册操作手册输入说明本说明的第章规定执行测试用例所需的各个输入有些输入可以用值允许适当的误差来规定而另一些输入如常数表或事务文件可以用名来规定规定所有合适的数据库文件终端信息内存常驻区域和由操作系统传送的值规定各输入间所需的所有关系如时序关系等输出说明本说明的第章规定测试项的所有输出和特性如响应时间提供各个输出或特性的正确值在适当的误差范围内环境要求本说明的第章硬件规定执行本测试用例所需的硬件特征和配置如字符行的显示终端软件规定执行本测试用例所需的系统软件和应用软件系统软件可以包括操作系统编译程序模拟程序和测试工具等其他说明所有其他的要求如特种设施要求或经过专门训练的人员等特殊的规程要求本说
14、明的第章描述对执行本测试用例的测试规程的一切特殊限制这些限制可以包括特定的准备操作人员干预确定特殊的输出和清除过程用例间的依赖关系本说明的第章列出必须在本测试用例之前执行的测试用例名称归纳依赖性质测试规程说明测试规程说明结构如表表示表测试规程说明测试规程说明名称目的特殊要求规程步骤下面给出本说明每一章的详细内容测试规程说明名称本说明的第章给每个测试规程说明取一个专用名称给出对有关测试设计说明的引用目的本说明的第章描述本规程的目的如果本规程执行测试用例则引用各有关的测试用例说明特殊要求本说明的第章指出执行本规程所需的所有特殊要求包括作为先决条件的规程专门技能要求和特殊环境要求规程步骤本说明的第章
15、日志说明用来记录测试的执行结果观察到的事件和其他与测试有关事件见条测试日志和条测试事件报告的所有特殊方法或格式准备描述准备执行规程所必需的动作序列启动描述开始执行规程所必需的动作处理描述在规程执行过程中所必需的动作度量描述如何进行测试度量如描述如何用网络模拟程序来度量远程终端的响应时间暂停描述因发生意外事件暂停测试所必需的动作再启动规定所有再启动点和在各再启动点上重新启动规程所必需的动作停止描述正常停止执行时所必需的动作清除描述恢复环境所必需的动作应急描述处理执行过程中可能发生的异常事件所必需的动作测试项传递报告测试项传递报告结构如表所示表测试项传递报告传递报告名称传递项位置状态批准下面给出本
16、报告每一章的详细内容传递报告名称本报告的第章为本测试项传递报告取一个专用名称传递项本报告的第章规定被传递的项及其版本修订级别提供与传递项有关的项文件和测试计划的相关信息指出对该传递项负责的人员位置本报告的第章规定传递项的位置及其所在的媒体状态本报告的第章描述被传递的测试项的状态包括其与项文件这些项的以往传递以及测试计划的差别列出希望由被传递项解决的事件报告批准本报告的第章规定本传递报告必须由哪些人姓名和职务审批并为签名和日期留出位置测试日志测试日志结构如表所示表测试日志测试日志名称描述活动和事件条目下面给出本报告每一章的详细内容测试日志名称本日志的第章为本测试日志取一专用的名称描述本日志的第章
17、除了在日志条目中特别注明的以外用于日志中所有条目的信息都包括在本章中应该考虑有以下信息规定被测试项及其版本修订级别如果存在的话引用各项的传递报告规定完成测试的环境属性包括设备说明所用的硬件所用的系统软件及可用存储容量等可用资源活动和事件条目本日志的第章对每个事件包括事件的开始和结束记录发生的日期和时间并说明记录者应考虑以下各项信息执行描述记录所执行的测试规程的名称并引用该测试规程说明记录执行时在场人员包括测试者操作员和观察员还要说明每个人的作用测试结果对每次执行记录人工可观察到的结果如产生的错误信息异常中止和对操作员动作的请求等还要记录所有输出的位置如磁带号码记录测试的执行是否成功环境信息记录
18、本条目的一切特殊的环境条件意外事件记录意外事件及其发生前后的情况如请求显示总计屏幕显示正常但响应时间似乎异常长重复执行时响应时间也同样过长记录无法开始执行测试规程或无法结束测试的周围环境如电源故障或系统软件问题事件报告名称每产生一个测试事件报告时记录其名称测试事件报告测试事件报告结构如表所示表测试事件报告测试事件报告名称摘要事件描述影响下面给出本报告每一章的详细内容测试事件报告名称本报告的第章为本测试事件报告取一个专用名称摘要本报告的第章简述事件指出有关测试项及其版本修订级别引用有关的测试规程说明测试用例说明及测试日志事件描述本报告的第章对事件进行描述该描述应包括以下各项输入预期结果实际结果异
19、常现象日期和时间规程步骤环境重复执行的意图测试者观察者该描述应该包括有助于确定事件发生原因及改正其中错误的有关活动及观察例如描述可能对此事件有影响的所有测试用例执行情况描述与已公布的测试规程之间的一切差异等影响本报告的第章在所知道的范围内指出本事件对测试计划测试设计说明测试规程说明或测试用例说明所产生的影响测试总结报告测试总结报告结构如表所示表测试总结报告测试总结报告名称简述差异测试充分性评价结果概述评价活动总结批准下面给出本报告每一章的详细内容测试总结报告名称本报告的第章为本测试总结报告取一个专用名称简述本报告的第章归纳对测试项的评价指明被测试项及其版本修订级别指出测试活动的发生环境对于每个
20、测试项如果存在测试计划测试设计说明测试规程说明测试项传递报告测试日志和测试事件报告等文件则可以引用它们差异本报告的第章报告测试项与它们的设计说明之间的差别并指出与测试计划测试设计说明或测试规程说明中描述或涉及的测试间的差别说明产生差别的原因测试充分性评价本报告的第章根据测试计划规定的充分性准则如果存在的话对测试过程作充分性评价指出未被充分测试的特性或特性组合并说明理由结果概述本报告的第章总结测试的结果指出所有已解决的事件并总结其解决方法指出尚未解决的事件评价本报告的第章对每个测试项进行总的评价本评价必须以测试结果和项的通过准则为依据活动总结本报告的第章总结主要的测试活动和事件总结资源消耗数据如
21、人员的总体水平总机时和每项主要测试活动所花费的时间批准本报告的第章规定本报告必须由哪些人姓名和职务审批并为签名和日期留出位置附录文件编制实施及使用指南参考件实施指南在实施测试文件编制的初始阶段可先编写测试计划与测试报告文件测试计划将为整个测试过程提供基础测试报告将鼓励测试单位以良好的方式记录整个测试过程的情况经过一段时间的实践积累了一定的经验之后再逐步引进其他文件测试文件编制最终将形成一个相应于设计层的文件层次即系统测试文件子系统测试文件及模块测试文件等在本单位所使用的特定的测试技术的文件编制可作为正文中所述的基本文件集的补充用法指南在项目计划及单位标准中应该指明在哪些测试活动中需要哪些测试文件并可在文件中加入一些内容使各个文件适应一个特定的测试项及一个特定的测试环境表是在多种测试活动中所需的测试文件的例所需的文件数量将因单位而异表一个测试文件编制实例活动文件测试计划测试设计说明测试用例说明测试规程说明测试项传递报告测试日志测试事件报告测试总结报告验收安装系统子系统模块附加说明本标准由上海计算机软件技术开发中心负责起草本标准主要起草人朱三元陈敏
