文档修订记录*变化状态:C = 创立,A = 增加,M = 修改,D = 删除*正式发布时文档版本号从1.0开始。
对文档进行小改动时,版本号以0.1进阶;大改动时版本号以1.0进阶。
文档审批记录目录1.前言51.1.目的51.2.围51.3.术语定义51.4.预期读者与阅读建议51.5.参考52.工程概述63.验收原则64.总体验收标准64.1.标准定义64.2.验收标准的详细说明64.2.1.软件错误的严重性等级74.2.2.错误与严重性等级对应74.2.2.1.一级错误的描述74.2.2.2.二级错误的描述74.2.2.3.三级错误的描述84.2.2.4.四级错误的描述84.2.2.5.五级错误的描述85.工程验收标准85.1.功能测试85.1.1.功能项测试85.1.1.1.功能一85.1.1.2.功能二95.1.2.业务流程测试95.1.2.1.业务流程一95.1.2.2.业务流程二95.2.非功能测试95.2.1.容错测试95.2.2.安全性测试105.2.3.性能测试105.2.4.压力测试105.2.5.易用性测试105.2.6.适应性测试105.3.安装测试115.3.1.数据恢复测试115.3.2.数据接入115.3.3.数据服务115.4.文档测试115.5.用户有特别要求的测试116.验收资料117.附录:GB/T 16260软件质量评价特性127.1.功能性127.1.1.适合性127.1.2.准确性127.1.3.互操作性、互用性127.1.4.依从性127.1.5.安全性127.2.可靠性137.2.1.成熟性137.2.2.容错性137.2.3.易恢复性137.3.易用性137.3.1.易理解性137.3.2.易学性137.3.3.易操作性137.4.效率147.4.1.时间特性147.4.2.资源特性147.5.维护性147.5.1.易分析性147.5.2.易改变性147.5.3.稳定性147.5.4.易测试性147.6.可移植性147.6.1.适应性157.6.2.易安装性157.6.3.遵循性157.6.4.易替换性151.前言1.1.目的〔如下描述:〕在参考了大量的实践案例和文献的基础上,结合工程特征、客户需求及当前业务实际制定本验收标准,确立工程质量目标,规本软件的验收。
1.2.围〔如下描述:〕适用于公司所有类型工程(包括产品研发类、合同开发类、工程实施类以及系统集成类)的验收标准确定。
本标准应在软件合同签订时制定,并作为软件的质量标准指导软件生产。
1.3.术语定义{提供所有为正确解释本软件开发计划所必需的术语和缩略语的定义。
术语很多时,用列表作为本文档的附件。
}1.4.预期读者与阅读建议{描述本文档的主要读者,以及这些读者在阅读时的阅读重点与建议。
可用列表的方1.5.参考〔列出描述参考的所有文档。
〕《GB/T 16260-1996 信息技术/软件产品评价/质量特性及其使用指南》《GB/T17544-1998软件包质量要求和测试》《GB/T 15532-2008 计算机软件测试规》2.工程概述3.验收原则验收参与部门:客户代表、***公司、最终用户单位、专家小组或第三方验收人员。
在软件开发合同的签订阶段就提出软件验收工程和验收通过标准的意见;在软件的需求评审阶段,仔细审阅软件的需求规格说明书,指出不利于测试和可能存在歧义的描述;在***公司开发完软件并经过开发方部仔细的测试后,对完成的软件进行评审或第三方的验收测试,提供完整的错误报告提交给客户代表,由客户代表根据之前签订的开发合同中相应的验收标准判断是否进行验收。
4.总体验收标准总体验收标准是***公司结合国家标准、软件行业惯例所提出的对于软件系统质量的最低要求,所有交付的软件必须满足本标准的约定。
4.1.标准定义{以下容根据工程实际情况调整:}1)测试用例不通过数的比例< 1.5 %;2)不存在错误等级为1的错误;3)不存在错误等级为2 的错误;4)错误等级为3 的错误数量≤5;5)所有提交的错误都已得到更正;4.2.验收标准的详细说明总体验收标准,即每一级别的错误量的可接受围。
一般来说,不允许存在1 级和2级错误,而3 级错误的数量则可按本标准确定或由用户方和开发方根据软件的规模和复杂程度进行商定,并在软件开发合同中明确地列出。
在软件验收测试中,测试的依据包括软件的投标文件、开发合同、需求规格说明书, 同时还包括特定软件的相关行业标准(这些行业标准应在开发合同中明示出来)。
在进行第三方的验收测试后,软件评测中心将发现的所有错误进行总结和归纳,并提交完整的错误报告,在错误报告中包括每一级别的错误数量和错误清单(所有的错误都需经过用户方和开发方的确认)。
用户方根据错误报告中每一级别的错误数量和错误清单与软件开发合同中的验收标准进行对照,如错误的级别和数量在合同中没有约定,可按本办法的规定进行。
用户方认为软件可以验收,但要求开发方对错误报告中的所有错误进行整改,进行回归测试,确认错误报告中的所有错误全部改正方可;如错误的级别和数量在合同可接受的围外,用户方认为软件不可验收,要求开发方在规定的时间全面整改软件,再次进行完整的验收测试。
4.2.1.软件错误的严重性等级软件错误的严重等级由重到轻,如下:1)不能执行正常功能或重要功能, 或者危及人身安全;2)严重地影响系统要求或基本功能的实现, 且没有办法解决;3)严重地影响系统要求或基本功能的实现, 但存在合理的解决办法;4)使操作者不方便或遇到麻烦, 但不影响执行正常功能或重要功能;5)其它错误;4.2.2.错误与严重性等级对应4.2.2.1.一级错误的描述这一级别的错误一般包括以下容: 没有实现或错误地实现重要的功能;业务流程存在重大隐患;软件在操作过程中由于软件自身的原因自动退出系统或出现死机的情况;软件在操作过程中由于软件自身的原因对系统或数据造成破坏;在现有的软、硬建设环境下不能实现应有的功能;特殊软件在操作过程中可能危及系统和人身安全等。
4.2.2.2.二级错误的描述这一级别的错误一般包括: 没有实现基本功能,并且不存在替代办法;没有实现重要功能中的部分功能,并且不存在替代办法;业务流程衔接错误;密钥以明文方式存储;没有留痕功能;用户的权限分配不合理;在现有的环境下,不能实现部分功能且没有替代方案;没有满足系统的性能要求。
4.2.2.3.三级错误的描述这一级的错误是与第2 级别的错误相对应的,而第3 级错误则存在替代方法;对误操作或错误操作没有提示,导致非法数据进入数据库。
4.2.2.4.四级错误的描述这一级别的错误通常为易用性方面的错误。
比如界面不友好、前后风格不一;中英文混杂;查询结果输出不直观等。
4.2.2.5.五级错误的描述通常为文档方面的错误,如安装手册、操作手册、维护手册中的描述错误。
5.工程验收标准验收工程的划分参照GB/T 16260 标准。
在该标准中,将软件的质量特性分为6 大特性、21 个子特性,而对于具体的软件,并非都要进行这21 个特性的测试和评价。
本文选取的是最通用的子特性部分,针对各种不同的软件,可以对验收工程进行剪裁或扩充,请参考附录“GB/T 16260软件质量评价特性”。
5.1.功能测试5.1.1.功能项测试{对软件需求规格说明书中的所有功能项进行测试;}5.1.1.1.功能一1)功能名称2)功能描述3)目标结果5.1.1.2.功能二1)功能名称2)功能描述3)目标结果5.1.2.业务流程测试{对软件工程的典型业务流程进行测试;}5.1.2.1.业务流程一1)业务流程名称2)流程图及说明3)目标结果5.1.2.2.业务流程二1)业务流程名称2)流程图及说明3)目标结果5.2.非功能测试5.2.1.容错测试{容错测试的检查容包括:1) 软件对用户常见的误操作是否能进行提示;2) 软件对用户的的操作错误和软件错误,是否有准确、清晰的提示;3) 软件对重要数据的删除是否有警告和确认提示;4) 软件是否能判断数据的有效性,屏蔽用户的错误输入,识别非法值,并有相应的错误提示。
}5.2.2.安全性测试{安全性测试的检查容包括:1) 软件中的密钥是否以密文方式存储;2) 软件是否有留痕功能, 即是否保存有用户的操作日志;3) 软件中各种用户的权限分配是否合理;}5.2.3.性能测试{对软件需求规格说明书中明确的软件性能进行测试。
测试的准则是要满足规格说明书中的各项性能指标。
}5.2.4.压力测试5.2.5.易用性测试{易用性测试的容包括:1) 软件的用户界面是否友好,是否出现中英文混杂的界面;2) 软件中的提示信息是否清楚、易理解,是否存在原始的英文提示;3) 软件中各个模块的界面风格是否一致;4) 软件中的查询结果的输出方式是否比较直观、合理。
}5.2.6.适应性测试{参照用户的软、硬件使用环境和需求规格说明书中的规定,列出开发的软件需要满足的软、硬件环境。
对每个环境进行测试。
}5.3.安装测试5.3.1.数据恢复测试5.3.2.数据接入5.3.3.数据服务5.4.文档测试{用户文档包括: 安装手册、操作手册和维护手册。
对用户文档测试的容包括:1) 操作、维护文档是否齐全、是否包含产品使用所需的信息和所有的功能模块;2) 用户文档描述的信息是否正确, 是否没有歧义和错误的表达;3) 户文档是否容易理解, 是否通过使用适当的术语、图形表示、详细的解释来表达;4) 用户文档对主要功能和关键操作是否提供应用实例;5) 用户文档是否有详细的目录表和索引表;}5.5.用户有特别要求的测试6.验收资料1)解决方案2)合同3)需求规格说明书;4)概要设计说明书;5)数据及数据库设计要求说明书;6)详细设计说明书;7)操作手册;8)用户手册;9)工程用户评价过程意见;10)软件接口规;11)安装盘;7.附录:GB/T 16260软件质量评价特性7.1.功能性与一组功能及其指定的性质有关的一组属性,这里的功能是指满足明确或隐含的需求的那些功能。
这组属性以软件为满足需求做些什么来描述,而其他属性则以何时做和如何做来描述7.1.1.适合性与规定任务能否提供一组功能以及这组功能的适合程度有关的软件属性,适合程度的例子是面向任务系统中由子功能构成功能是否合适表容量是否合适等与能否得到正确或相符的结果或效果有关的软件属性,例如此属性包括计算值所需的准确程度7.1.3.互操作性、互用性与同其他指定系统进行交互的能力有关的软件属性(为避免可能与易替换性的含义相混淆此处用互操作性互用性而不用兼容性)7.1.4.依从性使软件遵循有关的标准约定法规及类似规定的软件属性7.1.5.安全性与防止对程序及数据的非授权的故意或意外访问的能力有关的软件属性7.2.可靠性与在规定的一段时间和条件下软件维持其性能水平的能力有关的一组属性,即软件不会老化。