[发明专利]一种验证黑盒测试用例设计完整性的方法

说明书

本发明涉及计算机技术领域，具体公开了一种验证黑盒测试用例设计完整性的方法，包括以下步骤：步骤1：根据上层文件创建套件并参数化；步骤2：根据需求初始化参数并生成测试输入输出库；步骤3：创建库的匹配关系算法，并建立输入输出映射关系表；步骤4：利用测试工具生成的测试套件将映射关系表实例化为测试用例；步骤5：执行测试，并统计覆盖率。本发明可借助自动化测试工具，采用动态测试的方法通过覆盖率实时统计的方式不断优化并自动生成与执行黑盒测试用例，从而实现了黑盒测试执行对测试机的全覆盖，优化了黑盒测试用例的选取和黑盒测试全生命周期过程控制。

技术领域

本发明属于计算机技术领域，具体涉及一种验证黑盒测试用例设计完整性的方法。

背景技术

黑盒测试作为动态测试的组成部分、已成为继实现之后暴露缺陷的一种方法。黑盒测试阶段对所编写的测试用例要求为测试用例要实现对需求的全覆盖，因此，黑盒测试不能保证对测试机的全覆盖。

容错系统存在一部分无效等价类会造成系统错误、一部分无效等价类会造成系统故障的可能，因此测试的完整性要考虑其代码的实现方式及工作机理。由于白盒测试的覆盖率仅针对代码本身，因此对于容错系统而言，针对需求采用常规的设计方法设计并执行黑盒测试用例有可能会造成测试机缺陷的遗漏。

动态测试可借助工具基本实现自动化，包括测试套件的生成、测试执行及测试报告的生成。采用测试工具实现自动化测试结果的可信度在各行业都已有充分的认可，如在核电、航空、金融等领域已经出台了一系列的工具鉴定标准，对测试的自动化也在包括上述领域的很多领域广为使用，我国对自动化测试工具自行研制的大量投入及引进国外自动化测试工具的政策支持，第三方的认证许可等，这些为自动化测试工具实现测试自动化结果的可信度提供了有力保障。而现有的白盒测试工具对测试用例的设计没有实现自动化，只能自动生成测试套件。

发明内容

本发明的目的在于提供一种验证黑盒测试用例设计完整性的方法，能够验证黑盒测试对测试机是否实现全覆盖。

本发明的技术方案如下：

一种验证黑盒测试用例设计完整性的方法，包括以下步骤：

步骤1：根据上层文件创建套件并参数化；

步骤2：根据需求初始化参数并生成测试输入输出库；

步骤3：创建库的匹配关系算法，并建立输入输出映射关系表；

步骤4：利用测试工具生成的测试套件将映射关系表实例化为测试用例；

步骤5：执行测试，并统计覆盖率。

步骤1中，套件创建的依据是需求的上层文件，套件的存在形式是代码、设备或其它最终能被某种认可的实例化装置；

参数化是套件取值的实参、可以被赋值，与需求相对应；将套件的赋值设为一个参数，且这个参数可以根据需求进行赋值；参数的赋值满足是套件自动生成需求的所有输入输出域。

步骤2中，结合需求给已创建套件的参数进行赋值，将其实例化；

运行套件，自动生成满足需求的输入输出库，组建对应需求的输入输出空间；

对需求的跟踪通过建立需求跟踪矩阵，基于需求管理工具实现。

步骤3中，库的匹配关系算法是程序用以实现根据输入库识别输出库的方法，用以建立输入输出库之间的相互对应关系，实现的方式为采用字典匹配算法表达式实现，根据测试套件与库映射表的对应关系建立测试机与输入输出库的对应关系。

步骤4中，测试套件由白盒测试工具根据待测试的代码自动生成，自动生成的测试套件采用输入输出库将其进行实例化，输入输出库根据映射关系表进行选择；被实例化的测试套件生成可以被自动化测试工具执行的测试用例。