[发明专利]确定质检效果的方法、装置、设备及存储介质

权利要求书

1.一种确定质检效果的方法，其特征在于，所述方法包括：

获取计算机设备对目标内容对象的机器质检结果，所述机器质检结果包括计算机设备检出的触发片段和未触发规则，所述触发片段是所述目标内容对象中满足检出规则的内容片段，所述未触发规则是所述目标内容对象不满足的检出规则；

获取质检人员对所述目标内容对象的人工质检结果，所述人工质检结果包括质检人员检出的触发片段和未触发规则；

比较所述机器质检结果和所述人工质检结果，并根据比较结果确定计算机设备对内容对象进行质检的效果。

2.根据权利要求1所述的方法，其特征在于，所述比较所述机器质检结果和所述人工质检结果，包括：

对计算机设备检出的触发片段和质检人员检出的触发片段进行比较，得到正确触发片段的个数和漏检触发片段的个数；

其中，所述正确触发片段包括计算机设备与质检人员均检出的触发片段，所述漏检触发片段包括计算机设备未检出而质检人员检出的触发片段。

3.根据权利要求2所述的方法，其特征在于，所述根据比较结果确定计算机设备对内容对象进行质检的效果，包括：

获取所述正确触发片段的个数和所述漏检触发片段的个数的第一和值；

获取所述正确触发片段的个数与所述第一和值的第一比值；

将所述第一比值确定为查出率，所述查出率用于指示计算机设备对内容对象进行质检时能够正确检出触发片段的概率。

4.根据权利要求2所述的方法，其特征在于，所述比较所述机器质检结果和所述人工质检结果，还包括：

对计算机设备检出的触发片段和质检人员检出的触发片段进行比较，得到误检触发片段的个数，所述误检触发片段包括计算机设备检出而质检人员未检出的触发片段；

对计算机设备检出的未触发规则和质检人员检出的未触发规则进行比较，得到正确未触发规则的个数，所述正确未触发规则包括计算机设备和质检人员均检出的未触发规则。

5.根据权利要求4所述的方法，其特征在于，所述根据比较结果确定计算机设备对内容对象进行质检的效果，包括：

获取所述正确触发片段的个数和所述正确未触发规则的个数的第二和值；

获取所述正确触发片段的个数、所述漏检触发片段的个数、所述误检触发片段的个数和所述正确未触发规则的个数的第三和值；

获取所述第二和值和所述第三和值的第二比值；

将所述第二比值确定为准确率，所述准确率用于指示计算机设备对内容对象进行质检时能够正确检出触发片段和未触发规则的概率。

6.一种确定质检效果的方法，其特征在于，所述方法包括：

获取质检人员对目标内容对象的人工质检结果，所述人工质检结果包括质检人员检出的触发片段和未触发规则，所述触发片段是所述目标内容对象中满足检出规则的内容片段，所述未触发规则是所述目标内容对象不满足的检出规则；

向服务器发送所述人工质检结果，所述人工质检结果用于触发所述服务器比较所述人工质检结果和所述目标内容对象的机器质检结果，并根据比较结果确定计算机设备对内容对象进行质检的效果，其中，所述机器质检结果包括计算机设备检出的触发片段和未触发规则。

7.根据权利要求6所述的方法，其特征在于，所述获取质检人员对目标内容对象的人工质检结果，包括：

接收质检人员针对所述目标内容对象触发的质检指令；

根据所述质检指令获取质检人员对所述目标内容对象的人工质检结果。

8.根据权利要求7所述的方法，其特征在于，所述质检指令包括片段检出指令，所述接收质检人员针对所述目标内容对象触发的质检指令，包括：

接收质检人员针对所述目标内容对象中的第一触发片段所触发的片段检出指令；

其中，所述片段检出指令用于指示质检人员检出了所述第一触发片段，所述第一触发片段是计算机设备针对所述目标内容对象检出的触发片段。