[发明专利]一种自动化测试方法及装置、计算机可读存储介质

说明书

本申请公开了一种自动化测试方法，包括如下步骤：根据测试需求，创建N套测试参数组和M个测试用例集，所述测试参数组包括至少一个测试参数，所述测试用例集包括至少一个测试用例，并将所述N套测试参数组和M个测试用例集进行绑定，其中，N、M均为大于1的自然数；利用测试用例集对应的测试参数组对测试用例集内的测试用例进行测试，并保存所述测试用例的一个或一个以上的测试结果。本申请还公开了一种自动化测试装置及计算机可读存储介质，通过实施上述方案，使得自动化测试工具每次自动执行测试用例时能使用多套测试参数，进而提高了测试工作的效率。

技术领域

本发明涉及但不限于自动化测试技术领域，尤其涉及一种自动化测试方法及装置、计算机可读存储介质。

背景技术

测试是项目研发过程中的一个重要阶段，是确保产品质量的关键，而测试工作的核心任务是测试用例的开发、管理和运行。为了便于管理和查阅，测试管理员通常会将大量测试用例按照某种规则进行分类和汇总，形成一棵测试用例树，再利用自动化测试工具将这棵测试用例树展现给测试人员。测试人员在运行测试用例之前，应先按照测试要求配置相应的测试参数(或称为配置参数，包括OS环境变量、测试工具环境变量、测试预置数据等)，自动化测试工具根据所配置的测试参数自动完成指定测试用例的执行，并将测试结果呈现到测试用例树上。

目前常用的自动化测试工具，如Java卡TCK(Technology Compatibility Kit)测试工具、Global Platform测试套件等，都采用了这种测试模式。但是，现有的自动化测试工具每次自动执行测试用例时只能使用预先指定的一套测试参数，若要使用另一套测试参数，必须人工重新配置；并且每次测试用例执行完毕后，每个测试用例只能保留一个测试结果(包括执行状态和执行结果等信息)，再次执行时，前一次的测试结果会被清除。

在实际的项目开发过程中，测试人员经常需要针对指定的一个、一组或全部测试用例使用多套不同的测试参数来反复执行，并收集全部测试结果进行汇总和比对。如果使用现有的自动化测试工具，由于测试用例上一次执行后的测试结果会被下一次执行后的测试结果覆盖掉，因此不便于测试人员对多次的测试结果进行比对。此外，由于每次自动执行测试用例时只能使用一套测试参数，测试人员需要长期值守在测试机前观察工作进度，配置、执行、记录的操作来回切换也比较繁琐，大量测试时难以保证人工操作不出任何差错。这对于项目工作来说是一个风险：一旦出错，测试工作就是不可靠的，随之产生的测试评估和分析结果也是不可信的，从宏观来说，对于整个项目及产品质量的保证和提升是一个很大的障碍。

发明内容

为了解决上述技术问题，本发明提供了一种自动化测试方法及装置、计算机可读存储介质，能够同时运行多套不同的测试参数，提高测试效率。

为了达到本发明目的，本发明实施例的技术方案是这样实现的：

本发明实施例提供了一种自动化测试方法，包括：

根据测试需求，创建N套测试参数组和M个测试用例集，所述测试参数组包括至少一个测试参数，所述测试用例集包括至少一个测试用例，并将所述N套测试参数组和M个测试用例集进行绑定，其中，N、M均为大于1的自然数；

根据测试参数组和测试用例集的绑定关系，利用测试用例集对应的测试参数组对测试用例集内的测试用例进行测试，并保存所述测试用例的一个或一个以上的测试结果。

进一步地，在创建所述测试参数组时，所述方法还包括：

为所述测试参数组分配一个测试参数组标识和/或测试参数组名称。

进一步地，在创建所述测试用例集时，所述方法还包括：

为所述测试用例集分配一个测试用例集标识和/或测试用例集名称。

进一步地，所述根据测试参数组和测试用例集的绑定关系，利用测试用例集对应的测试参数组对测试用例集内的测试用例进行测试的步骤之前，所述方法还包括：