[发明专利]基于标注样本的图片结构化算法的自动测试方法及系统

权利要求书

1.一种基于标注样本的图片结构化算法的自动测试方法，其特征在于，包括：

准备多个应用场景的测试样本集；

对选定的测试样本集进行样本标注，人工标注目标和属性值的正确信息，并保存到文件或数据库；

采用样本图片结构化脚本将样本目录下的图片一次送入结构化算法接口，并将结构化数据存放到文件中，目录结构和图片一致，并记录运行时间，计算解析性能数据；

采用目标分析脚本对选定测试样本集中的目标进行分析，输出不相同的目标，并保存不相同的目标图，计算目标检测的正确率、误检率和漏检率；

采用属性值分析脚本对选定测试样本集中目标的属性值进行分析，输出不相同的属性值，并保存属性值不相同的目标图，计算属性值识别的正确率和错误率；

将分析结果进行整理，输出性能报告和功能报告。

2.如权利要求1所述的方法，其特征在于，所述采用目标分析脚本对选定测试样本集中的目标进行分析具体包括：

对同一图片的结构化数据中的目标区域、类型与标注信息进行比对，若目标的x、y、w、h差异在设定范围内则视为相同目标，其中，x、y分别为目标左上角在原图中的横坐标和纵坐标，w和h分别为目标的宽和高，相同目标则视为匹配成功，若目标的x、y、w、h差异不在设定范围内则视为不相同目标，不相同目标视为漏检和误检目标。

3.如权利要求2所述的方法，其特征在于，所述采用属性值分析脚本对选定测试样本集的属性值进行分析具体包括：对同一图片的结构化数据中匹配成功的目标进行属性值与标注信息进行比对，属性值相同的则为相同的目标，属性值不同的则为不相同的目标。

4.一种基于标注样本的图片结构化算法的自动测试系统，其特征在于，包括：标注样本模块、运行分析模块和报告输出模块，

所述标注样本模块用于对选定的测试样本集进行样本标注，人工标注目标和属性值的正确信息，并保存到文件或数据库；

所述运行分析模块用于采用样本图片结构化脚本将样本目录下的图片一次送入结构化算法接口，并将结构化数据存放到文件中，目录结构和图片一致，并记录运行时间，计算解析性能数据；

采用目标分析脚本对选定测试样本集中的目标进行分析，输出不相同的目标，并保存不相同的目标图，计算目标检测的正确率、误检率和漏检率；

采用属性值分析脚本对选定测试样本集的属性值进行分析，输出不相同的属性值，并保存属性值不相同的目标图，计算属性值识别的正确率和错误率；

所述报告输出模块用于将分析结果进行整理，输出性能报告和功能报告。

5.如权利要求4所述的系统，其特征在于，所述运行分析模块采用目标分析脚本对选定测试样本集中的目标进行分析具体包括：

对同一图片的结构化数据中的目标区域、类型与标注信息进行比对，若目标的x、y、w、h差异在设定范围内则视为相同目标，其中，x、y分别为目标左上角在原图中的横坐标和纵坐标，w和h分别为目标的宽和高，相同目标则视为匹配成功，若目标的x、y、w、h差异不在设定范围内则视为不相同目标，不相同目标视为漏检和误检目标。

6.如权利要求5所述的系统，其特征在于，所述运行分析模块采用属性值分析脚本对选定测试样本集的属性值进行分析具体包括：对同一图片的结构化数据中匹配成功的目标进行属性值与标注信息进行比对，属性值相同的则为相同的目标，属性值不同的则为不相同的目标。

7.一种智能终端，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，其特征在于，所述处理器被配置用于调用所述程序指令，执行如权利要求1-3任一项所述的方法。

8.一种计算机可读存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1-3任一项所述的方法。