[发明专利]一种可动态调整资源的存储自动化测试方法及装置

说明书

本发明涉及测试资源分配领域，具体公开一种可动态调整资源的存储自动化测试方法及装置，在前台web系统创建测试任务，并为测试任务配置优先级；后台自动化控制系统根据测试任务中测试用例的类型确定并行测试用例，计算所有待执行测试任务所需总资源，计算后台当前可用资源；若后台当前可用资源小于所有待执行测试任务所需总资源，则后台自动化控制系统根据测试任务优先级，为测试任务分配资源执行测试测试任务执行时，所确定的并行测试用例并行执行。本发明在前端预先配置测试任务优先级，可根据测试任务的优先级来自动分配测试资源，做到资源可控；后台根据测试用例的分类算法确定是否测试用例可以并行执行，以减少测试时间，提高测试效率。

技术领域

本发明涉及测试资源分配领域，具体涉及一种可动态调整资源的存储自动化测试方法及装置。

背景技术

随着存储产品线自动化测试程度提高，自动化测试数量急剧增加，对自动化平台的要求越来越高，目前使用的存储自动化测试平台逐渐无法满足自动化测试的需要。目前的自动化测试平台使用分布式结构，在调度系统的控制下，多个执行设备互不影响，测试任务挂在执行队列中，当执行设备空闲时，将任务发布到执行机进行测试。现有技术若应用于存储自动化测试，受限于存储测试的特性，目前的测试都是串行执行，无法做到并行执行，效率较低，测试时间较长；且没有优先级设置，遇到紧急测试任务，需要手动调整其他非紧急任务占用的资源，过程全部人工操作，占用人工成本，影响其他测试计划，没有做到自动化、智能化。

发明内容

为解决上述问题，本发明提供一种可动态调整资源的存储自动化测试方法及装置，可根据测试任务的优先级来自动分配测试资源，做到资源可控；根据用例的分类算法确定是否测试用例可以并行执行，以减少测试时间，提高测试效率。

第一方面，一种可动态调整资源的存储自动化测试方法，包括以下步骤：

在前台web系统创建测试任务，并为测试任务配置优先级；每个测试任务包含至少一个测试用例；

后台自动化控制系统根据测试任务中测试用例的类型确定并行测试用例；

后台自动化控制系统根据测试用例并行执行数量计算所有待执行测试任务所需总资源，同时计算后台当前可用资源；

若后台当前可用资源小于所有待执行测试任务所需总资源，则后台自动化控制系统根据测试任务优先级，为测试任务分配资源执行测试；

若后台当前可用资源大于所有待执行测试任务所需总资源，则后台自动化控制系统根据各个待执行测试任务所需资源，为各个测试任务分配资源执行测试；

测试任务执行时，所确定的并行测试用例并行执行。

进一步地，测试任务所需资源包括所需执行机内存和所需存储设备数量；

所有待执行测试任务所需总资源为各个待执行测试任务所需资源的总和，包括所需执行机内存总和以及所需存储设备数量总和；

后台当前可用资源包括各个执行机可用内存的总和以及可用存储设备总数量。

进一步地，后台自动化控制系统根据测试用例并行执行数量计算测试任务所需资源，具体包括：

通过以下公式计算各个测试任务所需执行机内存和所需存储设备数量；

测试任务所需执行机内存=测试任务中并行操作测试用例需要的内存最大值*测试任务所需存储设备数量；

测试任务所需存储设备数量=测试任务所有测试用例可同时并行操作所需要的存储设备数量。

进一步地，根据测试任务中测试用例的类型确定并行测试用例，具体包括：

对于查询类测试用例，所有测试用例可直接并行测试执行，同时满足并行执行数量之和不大于后台可用存储设备可同时响应的请求之和；

对于I\O类测试用例，若测试用例中存在执行时长或数据量大于阈值的测试用例，则将执行时长或数据量小于阈值的测试用例并行执行，同时并行执行的性能要求不大于后台可用存储设备的最大性能。