[发明专利]AI识别装置的自动测试方法、装置、设备及存储介质

权利要求书

1.一种AI识别装置的自动测试方法，其特征在于，所述方法包括下述步骤：

根据已加载的测试用例确定当前识别测试项，基于基准数据的信息将当前识别测试项的基准图像数据导入到待测试的AI识别装置，其中，所述基准数据的信息包含于所述测试用例中，所述基准数据包括所述基准图像数据和图像标注数据；

控制所述待测试的AI识别装置识别导入的基准图像数据，并获取识别结果；

判断是否完成所述测试用例中的所有识别测试项，若已完成，则基于所述图像标注数据和所述识别结果输出所述待测试的AI识别装置的测试结果，否则跳转至根据已加载的测试用例确定当前识别测试项的步骤。

2.如权利要求1所述的方法，其特征在于，所述基准图像数据基于多种待测场景下拍摄得到，所述图像标注数据至少包括图像拍摄场景数据、图像内容数据和目标描述数据中的一种，所述图像拍摄场景数据至少包括拍摄的时间、地点、环境亮度、光照方向、天气情况、室内外情况、目标背景纹理和目标清晰度中的一种，所述图像内容数据至少包括图像像素格式、图像分辨率、目标类型和目标描述中的一种，所述目标描述数据至少包括目标的特征、目标的数量和目标在图像中的位置中的一种。

3.如权利要求1所述的方法，其特征在于，所述测试结果至少包括识别准确度、识别速度和识别位置偏差中的一种。

4.如权利要求1所述的方法，其特征在于，所述方法还包括：

保存测试数据，所述测试数据至少包括所述图像标注数据、所述识别结果和所述测试结果；

当接收到数据查询请求时，输出与所述数据查询请求对应的测试数据。

5.如权利要求4所述的方法，其特征在于，所述方法还包括：

基于相同基准数据下不同版本的AI识别装置的测试数据，分析所述待测试的AI识别装置的测试结果变化趋势，其中，所述测试结果变化趋势包括识别速度变化趋势、识别准确度变化趋势和/或识别位置偏差变化趋势。

6.如权利要求4所述的方法，其特征在于，所述方法还包括：

基于多种场景基准数据下所述待测试的AI识别装置的测试数据，分析所述待测试的AI识别装置针对不同场景的测试结果变化趋势，其中，所述测试结果变化趋势包括识别速度变化趋势、识别准确度变化趋势和/或识别位置偏差变化趋势。

7.如权利要求5或6所述的方法，其特征在于，所述方法还包括：

将所述测试结果变化趋势以图像化的方式显示。

8.一种AI识别装置的自动测试装置，其特征在于，所述装置包括：

数据导入单元，用于根据已加载的测试用例确定当前识别测试项，基于基准数据的信息将当前识别测试项的基准图像数据导入到待测试的AI识别装置，其中，所述基准数据的信息包含于所述测试用例中，所述基准数据包括所述基准图像数据和图像标注数据；

识别结果获取单元，用于控制所述待测试的AI识别装置识别导入的基准图像数据，并获取识别结果；以及

测试结果输出单元，用于判断是否完成所述测试用例中的所有识别测试项，若已完成，则基于所述图像标注数据和所述识别结果输出所述待测试的AI识别装置的测试结果，否则触发所述数据导入单元执行根据已加载的测试用例确定当前识别测试项，基于基准数据的信息将当前识别测试项的基准图像数据导入到待测试的AI识别装置的步骤。

9.一种测试设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。