1、ICS 35.080 L 77 备案号 :38365-2013 DB11 北京市地方 标准 DB11/T 1012 2013 软件产品登记测试通用技术规范 General Technical Specification for Registration Test of Software Product 2013 08-27发布 2013 - 12 - 01实施 北京市质量技术监督局 发布DB11/T 1012 2013 I 目 次 前言 . II 引言 III 1 范围 1 2 规范性引用文件 1 3 术语和定义 1 4 测试内容及测试要求 2 5 测试实施 4 6 软件评价 5 7 测试报告
2、要素 5 附录 A(资料性附录)测试报告样本 7 参 考 文 献 15 DB11/T 1012 2013 II 前 言 本标准按照 GB/T 1.1-2009给出的规则起草。 本标准由北京市经济和信息化委员会提出并归口。 本标准由北京市经济和信息化委员会组织实施。 本标准主要起草单位:北京软件与信息服务业促进中心、国家应用软件质量产品监督检验中心、信 息产业信息安全测评中心、信息 处理 产品标准 符合性检测中心、信息产业 通 信软件测评中心、中国软件 评测中心、北京市 电子 产品质量检测中心、国家信息中心软件评测中心、中国 科学院 软件 研究所基础 软 件测评实验 室、 工业和信息化部 软件与
3、 集成电路 促进中心 赛普 评测中心。 本标准主要起草 人: 孙建锋 、 左家 平、 何清清 、 肖辉 、 刘健 、 梁勇 、 贺晓能 、 吴娓娓 、 董云 、 李刚 (国家信息中心软件评测中心)、 吉志宏 、 马士民 、 徐淼 、 何伟 起、 薛云志 、 刘振峰 、 李青梅 、 袁艺匀 、 荣志刚 、李刚 (信息产业 通信软件测评中心)、 王鸿娴。 DB11/T 1012 2013 III 引 言 为了更好地 促进北京市软件产业 发展 、 加强 软件产品的管理,确保登记 测试的 一致 性、 可比 性和规 范性,根据 国务 院关于印发 进 一步鼓励 软件产业和 集成电路 产业 发展若 干政策
4、的 通知 (国 发 2011 4号 )、 软件产品 管理 办法 (中华 人民 共和国 工业和信息化 部令 2009年第 9号) 和 关于 软件产品 增值 税政策 的通 知 (财税 2011100号 )文件 精神 ,编写了 软件产品 登记 测试 通用技 术规范。 DB11/T 1012 2013 1 软件产品登记测试通用技术规范 1 范围 本标准规定 了软件产品 登记 测试的测试内容、测试要求、测试实施、软件评价和测试报告要素。 本标准 适用 于软件产品的 登记测试。 2 规范性引用文件 下列文件 对于 本文件的应用 是必不 可少 的。 凡是注日期的引用文件 , 仅注日期 的 版本 适用 于本
5、文件。 凡是不注日期 的引用文件 ,其最新版 本( 包括 所 有的 修改 单) 适用 于本文件。 GB 2312 信息 交换 用汉字编码字 符集 基 本集 GB 13000 信息 技术 通用 多八位 编码字 符集 (UCS) GB 18030 信息 技术 中文 编码字 符集 GB/T 18905.1-2002 软件 工程 产品评价 第 1部分 :概述 3 术语和定义 下列术语和定义 以 及 GB/T 18905.1-2002中的术语和定义 适用 于本文件。 3.1 软件产品 software product 交付给用 户的软件实 体, 包括一 套完整 的计算机程序以及 相关 文档 和数 据。
6、3.2 产品说明 product description 陈述应用软件性质的文 档, 帮助购买者在购买 前对 产品进 行适 用性评价。 3.3 用户文档 user document 软件产品的 开发 商所 提供 给用户 的、与 该软件 使用 有关的 各类 文档 。 3.4 软件样品 software samples 软件产品的 开发 商提 供给评价方 进行 软件产品 登记 测试的软件 副本。 3.5 功能 function 程序中的 一个算法 的实 现, 利 用该 实现 , 用 户或程序可 以完 成某 一工 作任 务的全 部 或部 分内容。 3.6 DB11/T 1012 2013 2 功能性
7、 functionality 在指定 条件 下使 用软件 时, 软件产品提 供满足需 求的 能 力。 3.7 易用性 usability 用户使用软件时 ,学习、 操作软件和准备输入的便 利程度,以及输 出结果和出 错 信息的易理 解 程度。 3.8 中文特性 Chinese characteristics 软件产品 支持 中文的 程度 。 3.9 黑盒测试 black box test 在测试人员不了 解软件产品的内部逻辑结构 、 不 具备 软件程序代码 的情况下 ,通过输入输出验 证功能能 否按 预期 运行 的活动。 3.10 登记测试 registration test 测试人员依据本技
8、 术规范验 证 软件产品的用 户文档 、功能性、易用性和中文 特性并出具报告用 于 企 业进 行软件产品 登记 的测试 活动 。 3.11 测试项 testing item 软件产品 登记 测试中 需要 被评价的 某一 方面特 性或某 一 类需 求的 总称 。 3.12 评价 evaluation 相对于 测试 项, 对测试的 结果给出 “符合 ”、“ 不符合 ” 或“ 不适 用”等结论 性陈述 的行 为。 4 测试内容及测试要求 4.1 测试内容 软件产品 登记 测试内容应 包含用 户文 档、 功能 性、 易用性和中文 特性 4个方 面。 4.2 测试要求 4.2.1 用户文档 4.2.1.
9、1 完备性 用户文 档完 备性要求 如下 : a) 应包括 软件产品 说明 或使 用说明书; DB11/T 1012 2013 3 b) 应包含 使用软件的 名称、软件版 本、软件 生产 厂商 、软件功 能描 述和 最低运 行环境等 信息 ; c) 应包含 最终 用户 可以 调用的 功 能的 概述 。 4.2.1.2 正确性 各 用户文 档中 所有信息应正 确,没 有歧 义和错误 的 表达 。 各用 户文 档 应指 导 用户 正 确配置 与 操作软件产品。 4.2.1.3 一致性 各用户 文档 中的文 字描 述、 图形 的表示 不应 自相 矛盾 , 且与产品 描述 之间 不应 互 相矛盾 。
10、4.2.1.4 易理解性 对使用 该软件产品 所必 需的信息 以及 可以 调用的 关键功能 的描 述是 易理 解的。 4.2.1.5 可操作性 卡片和 快速 参考 指南 以外 的用户 文档 ,应给出 目次 (或主 题词 列表 )和 索引。 4.2.2 功能性 4.2.2.1 安装/ 卸载 被测软件应 依据 软件安 装手册进 行安 装, 软件安 装过 程 可识别 , 软件安 装完 成后不 影响原系统 的 正 常使 用;被 测软件 可以 依 据卸载 要求进 行卸载 , 卸载 过程 可识别 , 软件卸载完 成后 , 不 影响原 系统的 正常 使用。 4.2.2.2 可识别 被测软件安 装之 后, 软
11、件 功能应 是可 识别 的。 4.2.2.3 可执行 基本要求 如下 : a) 在给定的 限制 范围内 , 使 用相应的 环境 设施、 器材 和数据, 用户 文档 中描 述的 功 能是 可执 行 的 ; b) 一个功 能执 行应 返回 需求 所要求的 结果; c) 功能的前 置条 件满足 的情况 下 应触 发对 应功 能的 行为 ; d) 对一个 功能 进行 两种 完全 相同的 操作 ,被 测软件应 返回同 一个 结果; e) 应当合理 的处理 不符合 预期 的 执行 过程 ,保 证不对 原系统造 成破坏 ; f) 测试用 例应 在被 测软件 上运 行 通过 。 4.2.2.4 一致性 遵循软
12、件实 际操 作的 结果 与用户 文档 描述 的预 期结果 一致 。 4.2.3 易用性 DB11/T 1012 2013 4 4.2.3.1 易理解性 基 本要求 如下 : a) 有关软件 执行 的各 种问 题、 消 息和 结果 应是 易理 解的 ; b) 源自软件的 消息应 设计 成使最终 用户 易理 解的 形式 ; c) 屏幕输入 格式 、报 表和 其他 输 出对 用户 来说 应是 清晰 且易 理解 的。 4.2.3.2 易学性 借助用 户界 面、 帮助 功能 、用户 文档 提供 的手 段, 最终用 户能 够学 习如 何使 用某一 功能 。 4.2.3.3 易操作性 基 本要求 如下 :
13、a) 用户界 面应 显示正 常, 界面 风格 应一致, 输入输 出正 常 ; b) 具有严重后 果的 功能 执行 应是可 逆的 , 或者 软件应给出该 后果 的明 显警 告 , 并且在该 命令 执 行 前要求 确认 。 4.2.4 中文特性 基 本要求 如下 : a) 对话框 、菜 单、 图标、 窗口 等 界面 应支持 中文 显示; b) 除专业术语 外, 软件产品应中文 汉化 ; c) 自带字 库的软件应 支持 中文 编码 ,至 少支持 GB 2312、 GB 13000或 GB 18030中的一 种。 注: 在软件产品登记测试时, 用户文档和功能性属于测试的必备项, 如果无用户界面的软件产
14、品, 评价方对易 用性和中文特性可不进行测试且不做评价。 5 测试实施 5.1 测试准备 5.1.1 对被测软件的现场要求 被 测软件样品 以及用 户文 档应提 供到 测试 现场 。 需 要时应 对软件样品进 行病毒 检 查,确保 软件 样品未 被病毒感染 。 5.1.2 对系统组成部分的现场要求 对 于 被测软件样品的测试 , 在产品 描述或 用户 文档 中已指 明要求的 所有 系统 的组成部 分应提 供 到测试 现场 ,包括 硬件 环境 、软件 环境 、网络 环境 、其它辅 助设 备以 及相 关电子资料 等。 5.2 测试方法 5.2.1 用户文档审查 通 过 对 用 户 文 档 的检 查
15、 , 验 证 其是否符合 4.2.1中完备性、正确性、一致 性、易理解性和可 操 作性的要求。 DB11/T 1012 2013 5 5.2.2 功能性测试 针对用 户文 档中 对于 功能 的描述 , 采用 黑盒 测试 方法 设 计功 能测试用 例, 验证被测软件 是否 按 用户文 档中 所描 述的 功能 得到实 现, 并符合 4.2.2中 可识别 、可 执行 和一致 性的要求。 5.2.3 易用性测试 从使用 者的 角度 对被 测软件的安 装、 功能、用 户 界 面 、 系统辅 助等易 用性进 行测试 ,通 过 各 因 素的表 现, 验证被 测系统 是否符合 4.2.3中对 易理 解 性、易
16、 学性和 易操 作性的要求。 5.2.4 中文特性测试 在 测试 过程 中, 对被 测软件的对 话框 、 菜 单、 图 标、 窗 口等 界面 进行 检查 , 验 证 其是 否支持 中 文显示 。 6 软件评价 6.1 测试项评价 在软件产品 登记 测试中 ,对 每 一个 测试 项要给出测试 结果 。测试 结果 分为 : 符合 ; 示 例 :该 测试 项符合 本标准 4.2规定的要求。 不 符合 ; 示例: 该测试 项不 符合 本标准 4.2规定的要求。 不适 用。 注 : 无 用 户 界 面 的软件产品,易用性和中文特性可不做评价。 6.2 整体评价 根据测试 项的评价 结果 ,对 软件进 行
17、整体 评价 ,评价 结果 分为 : 通 过: 所有 测试 项的测试结果 均为 “符合 ” (包 含易用性与中文 特性 结果 为 “不适 用” ) , 整个软件产品的测试 结果 为通过 。 不 通过 :测试 项的测试 结果 存在 “不 符合 ”, 则软件产品的测试 结果 为不 通过。 7 测试报告 要素 7.1 报告标识 测试报告的 唯一 性标 识一 般为报告 编号 ,由测试 机构自行 定义。 7.2 基本信息 测试报告 基本信息应 包括 :软件 名称 (可 包含 简称 )、 版 本 / 型 号 、委 托单位 名称 、单位 地址、 电 话 、邮 政编码 、联 系人 、电子 邮件 地址 、生 产单
18、位 名称 、来 样日期 、测试单位名称 、测试 地点 、 软件测试 日期 、软件样品内容及 数量、测试 依据 以及测试 人员、 审核 人员、 批准人 员签 字等 , 参 见DB11/T 1012 2013 6 附录 A。 7.3 测试结论 测试结论 应包括 测试 依据 、测试内容、 各测试 项的测试结果 概述 和被 测软件的 整体 评价 , 参 见 附录 A。 7.4 测试环境 测试环境 应描 述实 际测试 环境, 包括 但不 限于 硬件 环境、软件 环境、 网络 环境 、 辅助 设备 、 电 子 资料 等, 以及样品的 病毒 检 查情况 ,参 见附录 A。 7.5 测试内容 应 以 表格 的
19、形 式表 现被 测软件的用 户文 档、 功 能性、 易用性和中文 特性 等四个 特 性中 所有 测试 项 , 并包 含具 体的测试 结果 , 参见 附录 A。 7.6 缺陷列表 应给出 被测软件 在测试 过程 中 发现 的缺陷 , 包括 但 不限于 缺陷 编号 和缺陷 情况 详细 描述 。 如测 试过程 中未 发现 软件 缺陷 ,该部 分可 以略去 ,参 见附录 A。 DB11/T 1012 2013 7 附录 A (资料 性附录) 测试报告样本 LOGO No:报告编号 软件产品登记 测试报告 样品名称 被测软件名称 简称 (含版本号) 生产单位 软件生产单位名称 委托单位 委托测试单位名称
20、 报告日期 出具报告日期( XXXX年 XX月 XX日) XXXXXXXXXX检 /评测中心 DB11/T 1012 2013 8 测试报告说明 1. 本报告无本测试机构“检测/ 评测专用章”无效; 2. 本报告无测试人员、审核人员、批准人员签字无效; 3. 本报告涂改无效; 4. 未经本测试机构书面批准,不得复制报告(完整复制除 外); 5. 本报告测试数据仅对来样负责; 6. 对测试报告有异议,请于收到 报告 之 日 起十五 日内向本 测试机构提出申诉。 DB11/T 1012 2013 9 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 9页 共 6页 样品
21、名称 被 测软件名称 版本 /型 号 软件版本 委托单位 委 托 单位名称 联系电话 委 托 单位固定电话号 码 委托单位 地址 委 托 单位地址 邮政 编码 邮 政编码 联系 人 联 系 人 电子邮 件 电子邮件 生产单位 生 产单位名称 来样日期 XXXX年 XX月 XX日 测试单位 第 三 方 测试机构名称 测试 地点 测试地点 样品测试 日期 XXXX年 XX月 XX日-XXXX 年 XX月 XX日 样品 内容 及 数 量 光盘 (/) 附件 (/) 说明书 (/) 其它 电子资料 (1) 测试 依据 DB11/T 1012-2013软件产品登记测试通用技术规范 用户文档 测试人员 审
22、核人员 日期 批准人员 日期 DB11/T 1012 2013 10 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 2页 共 6页 被测软件名称 版本号 测试结果 受 XXXXXX公司 (委托单位 名称)的委托, XXXXXXXXXX检/评测中心于 XXXX 年 XX月 XX日 至 XXXX年 XX月 XX日 , 对其 ( 或生产单位名称)开 发 的“被测 软件名称 版本号” 进行 了软件产品登记测试。 XXXXXXXXXX检/评测中心 依 据 DB11/T 1012-2013软件产品登记测试通 用 技 术规范地方标准中 相 关 条 款 , 参照用 户文档 ,分
23、别对其用户 文档、 功能性、易用性和中文特 性 四 个方面进行了 测试 , 测试结果表明: 1. 用户文档完整详细, 信息 描 述 正 确, 与软件 功 能一致, 易理解、 可 操 作; 2. 软件提供了安装和卸载功 能,还提供了 XXXXXXXXXXXX的功能,所 有 功能在测试期间可稳 定 运行; 3. 软件各种信息易理解 、 易浏览,便于用户操 作 ; 4. 软件支持 GB 2312/GB 13000.1/GB 18030( 支持其 中 一 个) 编码 标 准,符合中文使用习 惯 。 “被测软件 名称 版本 号”提 供了 用 户文 档 中 描述 的功 能, 软件 在 测试环境中运行稳定
24、, 操作简便,可 以 通 过 XXXXXXXXXX检/评测中心的软件产 品登记测试。 备注 :详细测试结果参 见具体测试内容; 测试结果中注明为“ 不 符合”的,参见缺陷 列 表。 (检测专用章) XXXX-XX-XX(报告日期) (注:本报告仅 作为企业享受 软件产品 增值税政策以 及软件产品登记 证明材料使 用 ,不 作为 软件产品质量 认证 的依据) DB11/T 1012 2013 11 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 11页 共 6页 测试环境 技术资料 : 用 户 文 档 病毒 检查 : 对 来 样样品用 XX杀毒软件的 XX.XX版本
25、进行了病毒检查,未发现病毒。 软件 环境 : 终端类别 操作系统 相关应 用软件 服务器 端 客户端 硬 件环境 : 终端类别 机器 名 设备 编号 配置 说明 服务器 端 客户端 网络环境 : 网络类型 带宽 设备 数量 其它辅助设备 : 设备 名称 规格型 号 数 量 备注 DB11/T 1012 2013 12 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 12页 共 6页 测试内容: 一、用户文档 表 1用户文档 第 1页 共 1页 测试 需求 测试 过程 说明 结果 完 备 性 见 标准 4.2.1.1 正 确 性 见 标准 4.2.1.2 一致性 见
26、标准 4.2.1.3 易 理 解性 见 标准 4.2.1.4 可 操 作性 见 标准 4.2.1.5 二 、功能性 表 2.1安装与卸载 第 1页 共 1页 测试 需求 测试 过程 说明 结果 安 装 按照用 户文 档安 装成 功 卸载 按照用 户文 档卸载 成功 表 2.2功能 表现 第 1页 共 2页 测试 需求 测试 过程 说明 结果 DB11/T 1012 2013 13 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 13页 共 6页 三 、易用性 表 3易用性 第 1页 共 1页 测试 需求 测试 过程 说明 结果 易 用性 见标准 4.2.3.1 见
27、 标准 4.2.3.2 见 标准 4.2.3.3 四 、中文特性 表 4中文特性 第 1页 共 1页 测试 需求 测试 过程 说明 结果 中文显 示 见标准 4.2.4 汉 化 程度 见 标准 4.2.4 编码支持 程度 见 标准 4.2.4 单位 地址 /邮编:测试机构 地址 /邮编 电话 /传真:测试机构联系电话 号 码/ 测试机构 传真 号码 电子邮箱 :测试机构 的电子邮箱 网址 :测试机构 网址 投诉电话 : 受理投诉的电话 DB11/T 1012 2013 14 XXXXXXXXXX检 /评测中心 软件产品登记测试报告 No:报告编号 第 14页 共 6页 缺陷列表: 缺陷编号 缺陷情况详细描述 DB11/T 1012 2013 15 参 考 文 献 1 GB/T 9385-2008 计算机软件 需求规 格说明 规范 2 GB/T 9386-2008 计算机软件测试文 档编 制规范 3 GB/T 15532-2008 计算机 软件测试规范 4 GB/T 16260.1-2006 软件工 程 产品质量 第 1部分: 质量 模型 5 GB/T 25000.51-2010 软件 工程 软件产品质量要求与评价( SQuaRE) 商 业 现 货 ( COTS) 软件产品的质量要求和测试 细 则