[发明专利]设备性能测试方法、装置、存储介质及电子设备

说明书

本申请涉及人脸识别技术领域，提供一种设备性能测试方法、装置、存储介质及电子设备。其中，性能测试方法包括：向待测试的人脸识别设备提供测试视频流；获取人脸识别设备输出的测试结果；基于测试结果与测试视频流的参考库中的数据计算人脸识别设备的性能指标，该参考库中的数据是根据测试视频流中的可抓拍对象确定的。上述方法在测试人脸识别设备的性能时，整个测试流程从提供视频流到计算性能指标都是自动完整的，显著提高了测试效率，也便于进行大量测试。并且，采用自动化流程还有利于避免手工统计中存在的错误，提高性能指标计算的精确性，此外，性能测试所使用的视频流可以反复使用，有利于从源头上改善测试的准确性。

技术领域

本发明涉及人脸识别技术领域，具体而言，涉及一种设备性能测试方法、装置、存储介质及电子设备。

背景技术

目前人脸识别设备广泛应用于需要进行行人身份识别的场景中，如安防、门禁等。一方面，有必要对生产出来的人脸识别设备进行性能(主要指在设备在抓拍、识别方面的能力)测试，测试合格后方可投入市场。另一方面，用户在从大量的人脸识别设备中选择符合自身要求的产品时，也需要对这些人脸识别设备进行性能测试。然而，在现有技术中，通常采用手工统计的方法测试人脸识别设备的性能，其测试效率低下。

发明内容

本申请实施例的目的在于提供一种设备性能测试方法、装置、存储介质及电子设备，以改善上述技术问题。

为实现上述目的，本申请提供如下技术方案：

第一方面，本申请实施例提供一种设备性能测试方法，包括：向待测试的人脸识别设备提供测试视频流；获取所述人脸识别设备输出的测试结果；基于所述测试结果与所述测试视频流的参考库中的数据计算所述人脸识别设备的性能指标；其中，所述参考库中的数据是根据所述测试视频流中的可抓拍对象确定的。

上述方法在测试人脸识别设备的性能时，整个测试流程从提供视频流到计算性能指标都是自动完整的，无需人工介入，显著提高了测试效率，也便于进行大量测试。并且，采用自动化流程还有利于避免手工统计中存在的错误，提高性能指标计算的精确性，进而更准确地评估人脸识别设备的性能。此外，性能测试所使用的视频流可以反复使用，这也保证了每次测试具有相同的输入，有利于从源头上改善测试的准确性。

在第一方面的一种实现方式中，所述测试结果包括所述测试视频流中的人脸的抓拍结果集，所述参考库包括所述测试视频流中的人脸的标准抓拍库，所述标准抓拍库包括预先从所述测试视频流中截取的所有可抓拍对象的人脸图片；所述基于所述测试结果与所述测试视频流的参考库中的数据计算所述人脸识别设备的性能指标，包括：基于所述抓拍结果集中的图片与所述标准抓拍库中的图片的比中情况计算所述人脸识别设备的性能指标。

在上述实现方式中，可对人脸识别设备的抓拍性能进行测试。由于人脸识别设备在进行人脸识别前首先要进行人脸抓拍，因此对其抓拍性能的测试也具有很高的实用价值。可以理解的，纯粹的抓拍设备(不具有人脸识别功能)也可以用此种方法进行抓拍性能的测试。

在第一方面的一种实现方式中，所述标准抓拍库还包括所述可抓拍对象在所述测试视频流中出现的次数，所述人脸识别设备的性能指标包括漏抓次数、总漏抓次数、误抓次数、重复抓拍次数、总重复抓拍次数、第一正确抓拍次数、第二正确抓拍次数中的至少一个；其中，所述标准抓拍库中可抓拍对象的所述漏抓次数利用所述可抓拍对象在所述标准抓拍库中出现的次数减去其被所述抓拍结果集比中的次数得到；所述总漏抓次数为所述标准抓拍库中所有可抓拍对象的漏抓次数之和；所述误抓次数为所述抓拍结果集未比中所述标准抓拍库的次数；所述标准抓拍库中可抓拍对象的所述重复抓拍次数利用所述可抓拍对象被所述抓拍结果集比中的次数减去其在所述标准抓拍库中出现的次数得到；所述总重复抓拍次数为所述标准抓拍库中所有可抓拍对象的重复抓拍次数之和；所述第一正确抓拍次数利用所述抓拍结果集比中所述标准抓拍库的次数减去所述总重复抓拍次数得到；所述第二正确抓拍次数为所述抓拍结果集比中所述标准抓拍库的次数。