高可靠性软件测试方案探讨2007-09-12 03:21:44 - 来源：CSDN - 发布者：admin - 评论数：0 - 点击数：413 - [ 评论]内容简介：随着软件系统规模和复杂度日益升高，越来越多的软件项目明确提出软件的可靠性要求。
而涉及高可靠性软件开发的软件企业也越来越意识到，软件测试在这些项目开发过程中绝不是一种辅助性工作，而是从软件质量控制角度保证软件工程过程质量的最有效方法。
有鉴于此，本文以CraftGS航天项目模型为例，系统地介绍了一套行之有效的软件测试方案，该方案对同类高可靠性软件项目测试工作的开展具有一定的参考意义和指导作用。
高可靠性软件测试方案探讨（嫦娥工程地面应用系统软件质量部戴金龙）[关键词]高可靠性软件测试软件验证技术软件确认技术软件测试管理版权声明：此论文版权归戴金龙先生所有。
任何大幅引用或转载请务必注明版权事项并征得作者同意。
1引言高可靠性软件泛指一类软件：该类软件运行过程中若出现故障会引发重大灾难性事故或经济损失。
通常航天型号软件、银行系统软件、医疗行业软件、通讯行业软件等均属此范畴。
目前，越来越多的软件企业涉及高可靠性软件项目，如何保证软件质量成为众多企业面临的一个很重要的课题。
这篇文章结合某航天项目地面应用系统模型（本文命名为CraftGS），重点讨论如何从软件测试的角度保证此类产品的软件质量。
2CraftGS项目简介CraftGS是一个很经典的卫星地面应用系统模拟项目。
它分为5个子系统：数据接收子系统(DAS)、数据预处理子系统(DPS)、运行管理子系统(OMS)、数据管理子系统(DMS)以及数据产品实现(DPRS)子系统。
CraftGS的总体可靠度要求是0.95。
各分系统分配到的可靠度指标是如下：CraftGS的业务逻辑是Data Package从卫星传入DAS，DAS负责解包，将解包后数据传入OMS 及DPS，OMS通过DAS传来的数据检测卫星是否正常运行并负责卫星飞行姿态调整；DPS负责调制DAS传来的数据，转换成有意义的逻辑数据。
DPS处理后的逻辑数据传入DMS以及DPRS。
其中DMS负责数据备份、数据查询及数据链路维护等操作；DPRS负责将DPS处理过的逻辑数据分门别类地转换成数据产品，并封装发布。
考虑到项目固有的可靠性安全性要求，CraftGS系统采用Java+Unix技术架构实现。
该架构从编程语言级和系统级对软件产品质量做了保证。
为了控制软件产品开发过程中的质量，笔者推荐采用如下软件测试方案。
3测试方案：软件验证技术+软件确认技术+软件测试管理CraftGS系统的软件测试方案由三个部分组成，即软件验证技术、软件确认技术和软件测试管理技术。
它们内涵及相互之间的关系如下图所示：其中，软件验证技术着眼于排除软件开发文档中的错误。
验证活动涉及的文档按开发流程主要涉及需求规格说明、设计规格说明（包括概要设计规格说明、详细设计规格说明、数据库设计规格说明）、编码规格说明、产品交付文档等一系列书面材料。
目前验证技术的实施在很大程度上是依靠测试人员手工完成的。
验证活动视实际需要有时还会涉及到开发人员和目标客户，需要得到他们必要的理解和支持。
验证测试采用的主要测试手段有：面对面质询、文档抽查、非正式会议、同行评审等等。
相对于软件验证技术，软件确认技术则主要着眼于排除程序代码中的错误。
活动涉及的对象主要是程序部件的代码或软件成品。
在实施过程中，常常按被测代码的规模和测试所处的层次将软件确认测试分为四个阶段，即：单元测试（也叫类测试）、集成测试（也叫组装测试）、系统测试和交付测试。
确认测试基本上由软件测试人员对照相关开发文档运行程序独立完成的。
必要时，也可让设计人员带领测试人员阅读程序代码共同发现其中的错误，（即所谓代码评审会）。
有意见认为，在单元测试(或类测试)阶段，应该有软件编码人员参与，这样能减轻测试人员阅读代码障碍。
原则上，测试理论不提倡程序作者负责把关自己编写的程序的质量。
在实际实施过程中，可视实际情况灵活处理。
（如成对编程可能会较好的处理单元测试这个难题，上面提到的代码评审会也是为应对这个难题而想出的一个好办法。
），软件确认技术目前已经部分地实现了测试工具的自动化，市面上已有不少自动化工具能在测试人员的辅助下完成相应的测试工作（例如用于Java代码单元测试的Junit工具，又如用于GUI测试的Rational Visual Test工具，等等）。
软件验证技术和软件确认技术均属于测试技术层面的东西。
然而对于工程质量的保证而言，光靠软件测试技术还远远不够，还需要技术管理层面上的东西。
软件测试管理技术的诞生正是为弥补这个不足。
按照管理的对象不同，测试管理技术大致涵盖软件测试团队组织管理、软件测试计划管理、软件缺陷（错误）跟踪管理以及软件测试件管理四大部分。
下面，笔者将结合CraftGS项目对该测试方案做一个详细的诠释。
4在CraftGS项目中具体应用上述测试方案CraftGS五个分系统的开发过程均在CraftGS测试团队的质量控制下有序进行，严格地实施了上述测试方案。
经专家评定，各分系统及最后集成后的系统总体均达到了任务书中所分配的可靠性指标。
4.1 在CraftGS项目中应用软件验证技术CraftGS项目中应用的软件验证技术主要包括需求规格说明验证、设计规格说明验证、代码验证以及交付验证。
以下逐一说明。
需求规格说明验证的主要任务是保证用户的功能需求、业务需求、以及其他的一些需求（如非功能性需求、约束性需求等等）都已经被分配到软件需求规格说明的各需求项中。
设计规格说明验证相对需求规格说明验证而言，稍微复杂些，它包括3个部分的内容：即概要设计规格说明验证、详细设计规格说明验证以及数据库设计规格说明验证。
其中概要设计规格说明验证的主要任务是确保软件需求规格说明中的需求项全部已经分配到了概要设计规格说明的各软件模块之中并且无多余物，详细设计规格说明验证的主要任务是确保概要设计规格说明中的模块已经全部分配到详细设计规格说明的各软件单元之中并且无多余物，数据库设计规格说明虽然从范畴上讲应该属于详细设计规格说明范畴，但笔者认为因改把它独立出来实施验证活动。
（数据库设计和软件设计毕竟有很多不同之处。
）数据库设计规格说明验证的重点任务是验证数据库与外部应用程序的接口是否正确、数据操作实现界面是否清晰、数据库整体设计是否合理、数据表设计是否符合3NF要求（如违反范式要说明详细理由）以及数据表中的字段（键）和索引的设计是否高效合理等等。
完成设计规格说明以后，下一步要做代码验证。
代码验证的内容包括：代码编写规范审查、代码审查和代码静态分析三个部分。
代码编写规范审查主要是审核代码排版的格式以及注解的格式是否符合开发团队的相应规范；代码审查的任务主要是验证详细设计中的软件单元是否都已被代码覆盖并正确实现，并且代码中不含冗余物；代码静态分析技术主要任务是检查变量或标号的定义与使用、表达式运算以及程序的流程设计上是否存在缺陷或错误。
做完代码验证以后，软件系统需要依次做单元测试、集成测试和系统测试，这部分内容属软件确认技术范畴，下面有专门的论述。
软件系统在做完系统测试后，就面临着交付使用的问题，在系统正式移交给用户之前，还需要做交付验证和交付测试。
交付测试技术下文有专门的论述，不赘述，这里主要谈交付验证技术。
交付验证包括安装验证和使用验证两部分内容。
其中，安装验证的主要任务是保证程序能按照用户手册的提示正确安装到目标机器上，使用验证的主要任务是确保程序能按照用户手册的提示的操作正确完成某项功能或事务处理。
这两部分工作通常是由测试人员完成的，用以核实相关安装和使用手册是否正确无误。
4.2 在CraftGS项目中应用软件确认技术CraftGS中应用的软件确认技术包括单元测试技术、集成测试技术、系统测试技术和交付测试技术。
其中单元测试的主要任务是验证详细设计规格说明中所划分出来的软件单元是否被程序编制人员用代码形式正确地实现了。
这里软件单元可能是某个函数（或称方法）也可能是某个抽象数据类型（如类、数据结构或者模板）。
单元测试在实际测试当中也常常被称为类测试（在面向对象的设计中）或白盒测试（白盒的意思是面向代码）。
单元测试的工作原理是建构桩模块和驱动模块以驱动被测单元运行，然后，测试人员输入设计好的测试用例，测试被测单元能否按照设计要求处理这些测试用例，对出现异常的测试用例，测试人员应做记载并反馈给软件开发团队。
做完单元测试以后，下一步的工作是对照软件概要设计规格说明，验证各软件单元组装后形成模块能否达到概要设计规格说明中模块的设计目标；在模块级集成工作完成之后，测试人员还应测试各模块组装后形成的用户系统内部存在冲突，各模块能否正常工作。
这里，模块可能是指某个软件部件，也可能是指某个或某几个分系统。
通常在做集成测试时先是从分系统内部的集成测试开始做起，做完以后再测试各分系统是否能集成为最终要实现的大系统。
也有其他做法（如自顶向下集成测试方法、核心系统先做集成测试或每日集成测试等等）。
总之，万变不离其宗。
集成测试要保证模块的内部正确性以及保证模块能最终集成为大系统。
集成测试有时也被称为组装测试（在型号软件中）或灰盒测试（有人认为集成测试介于白盒与黑盒之间）。
做完集成测试以后，下一步工作就是做系统测试。
系统测试的主要任务是验证经集成测试后形成的软件系统是否满足软件需求规格说明中的各需求项。
这些需求项包括：业务需求、功能需求、非功能性需求（如：性能、可靠性、安全性、系统维护等方面的要求）以及一些约束性需求（如开发标准、编程语言、通讯协议）等等。
由于需求项涉及的领域很广泛，这就导致了系统测试中对应的测试门类相当庞杂。
如：功能测试、执行路径测试、可靠性测试、压力测试、可恢复性测试、可移植性测试等等。
这些测试最显著的特征是在一定环境条件下（如：模拟现场或极端条件），设计各种测试用例，输入并运行完整的软件系统，根据软件系统运行过程中的实际表现，评估软件系统是否符合软件需求项的各类要求。
由于这类测试一般不涉及内部代码，因此，也有人把系统测试称做是黑盒测试。
在做完系统测试以后，软件产品就到了交付用户使用这个阶段了。
交付过程中的重要一环就是交付测试，交付测试的目标是保证用户对所交付的系统的满意。
与前面所讨论的测试不同，交付测试主要的参与者应该是目标客户。
客户参与越多越好。
交付测试的内容一般包括安装测试、可用性测试、alpha测试、beta 测试等。
其中安装测试的主要任务是测试软件系统能否在模拟环境下或实际现场由目标用户顺利完成在目标机器上的安装；可用性测试的主要任务是测试软件系统在完成安装以后能否完成用户的模拟任务或现场任务；alpha测试采用的形式一般是由一个用户在开发环境下对软件系统进行类似于黑盒的测试，测试的目的是从用户的角度评价软件产品的功能、可使用性、可靠性、性能和支持，尤其注重产品的界面和特色；beta测试采用的形式一般是先由软件的多个用户在实际使用环境下使用beta版软件系统一段时间，然后把使用中出现的各类故障或缺陷反馈给beta测试负责人员，再由测试负责人员移交给软件开发者，由开发人员负责修正并完善软件系统。