[发明专利]模型测试方法、装置、分布式集群、电子设备及存储介质

说明书

本申请提供一种模型测试方法、装置、分布式集群、电子设备及存储介质，该方法包括：在接收到主节点分配的测试任务时，监测已提取的特征中所述测试任务对应的特征是否已满足测试任务的需求。已提取的特征由固定节点根据待测模型中特征提取模块对测试图像进行提取得到。在测试任务对应的特征已满足测试任务的需求时，采用测试任务对应的特征执行测试任务。这样即把一个模型的整个测试环节拆分到了不同的节点上进行自动处理，并配置不同节点可以执行相应的功能。在需要进行多个测试任务时，只需要将相应的模型和测试任务指派到相应的节点上，即可由各节点自主执行相应的功能。这就解决了目前受限于人力，模型测试速度慢，易出错，无法进行大规模测试的问题。

技术领域

本申请涉及性能测试技术领域，具体而言，涉及一种模型测试方法、装置、分布式集群、电子设备及存储介质。

背景技术

目前，模型测试性能时，通常都是针对一个测试任务在一台机器上单独进行。对于需要同时进行多个测试的情况，则需要由测试工程师手动在不同机器上配置相应的待测模型，并运行相应的测试指令。但这样做受限于人力，存在有测试速度慢，易出错，无法进行大规模测试的问题。

发明内容

本申请实施例的目的在于提供一种模型测试方法、装置、分布式集群、电子设备及存储介质，用以解决目前模型测试速度慢，易出错，无法进行大规模测试的问题。

本申请实施例提供了一种模型测试方法，应用于分布式集群的任一工作节点中，包括：在接收到所述分布式集群中的主节点分配的测试任务时，监测已提取的特征中所述测试任务对应的特征是否已满足所述测试任务的需求；所述已提取的特征由所述分布式集群中的固定节点根据待测模型中特征提取模块对测试图像进行提取得到；在所述测试任务对应的特征已满足所述测试任务的需求时，采用所述测试任务对应的特征执行所述测试任务，得到测试结果。

在上述实现过程中，通过分布式集群的主节点来分配测试任务，通过固定节点来进行特征提取，而通过分配有测试任务的工作节点来执行测试任务，这样即把一个模型的整个测试环节拆分到了不同的节点上进行自动处理，并配置不同节点可以执行相应的功能。在需要进行多个测试任务时，只需要将相应的模型和测试任务指派到相应的节点上，即可由各节点自主执行相应的功能，从而实现测试任务，完成对模型的多个测试任务的并行执行。这就解决了目前受限于人力，模型测试速度慢，易出错，无法进行大规模测试的问题。

进一步地，所述方法还包括：在所述测试任务执行完毕后，将所述测试结果返回所述主节点。

在本申请实施例中，在测试任务执行完毕后，可以将测试结果返回主节点，从而使得主节点得以根据测试结果进行相应的操作。比如，可以将测试结果反馈给用户。

进一步地，所述方法还包括：在接收到所述主节点分配的待测模型时，提取出所述待测模型中的特征提取模块；将所述特征提取模块发送给所述固定节点，以供所述固定节点对所述测试图像进行特征提取。

在实际应用中，一个完整的模型通常会具有多个不同的模块，比如会具有用于表明具体如何进行特征提取的特征提取模块，除此之外还会具有损失函数、分类器等模块。在本申请实施例中，固定节点中用于进行特征提取的代码可以是预先写定的，但是不同模型其具体如何进行特征提取的方式(比如需要经过几次卷积、经过几次池化、卷积和池化之间的操作顺序是怎么样的等)通常会存在差异，而具体如何进行特征提取的方式是由模型中的特征提取模块决定的。因此在上述实现过程中，通过工作节点对待测模型进行删减，提取出待测模型中特征提取模块从而发送给固定节点，可以使得固定节点能够按照待测模型的特征提取方式进行特征提取，从而使得提取出的特征是与待测模型的能力相适配的，进而可以确保测试任务能够准确实现对于待测模型的性能测试。

进一步地，在提取出所述待测模型中的特征提取模块之后，所述方法还包括：将所述特征提取模块中的浮点数转化为整数，形成所述特征提取模块的二进制模块；所述将所述特征提取模块发送给所述固定节点包括：将所述特征提取模块的二进制模块发送给所述固定节点。