[发明专利]确定质检效果的方法、装置、设备及存储介质

说明书

本申请公开了一种确定质检效果的方法、装置、设备及存储介质，属于计算机技术领域。所述方法包括：获取计算机设备对目标内容对象的机器质检结果，机器质检结果包括计算机设备检出的触发片段和未触发规则，触发片段是目标内容对象中满足检出规则的内容片段，未触发规则是目标内容对象不满足的检出规则；获取质检人员对目标内容对象的人工质检结果，人工质检结果包括质检人员检出的触发片段和未触发规则；比较机器质检结果和人工质检结果，并根据比较结果确定计算机设备对内容对象进行质检的效果。本申请实施例提供的技术方案提供了一种对计算机设备质检的效果进行评估的方法，解决了无法对计算机设备质检的效果进行评估的问题。

技术领域

本申请涉及计算机技术领域，特别是涉及确定质检效果的方法、装置、设备及存储介质。

背景技术

当前，为了给用户提供更加优质的服务，许多企业都配备有直接对用户进行服务的客服人员。为了保证服务质量，实际应用中，通常需要对客服人员与用户之间的对话(也即是客服对话内容)进行质检。

现有技术中，为了提高质检效率，可以由计算机设备根据预先设定的检出规则对客服对话内容进行质检。

但是，如何对计算机设备质检的效果进行评估已经成为了一个亟需解决的问题。

发明内容

基于此，有必要针对无法对计算机设备质检的效果进行评估的问题，提供一种确定质检效果的方法、装置、设备及存储介质。

获取计算机设备对目标内容对象的机器质检结果，机器质检结果包括计算机设备检出的触发片段和未触发规则，触发片段是目标内容对象中满足检出规则的内容片段，未触发规则是目标内容对象不满足的检出规则；

获取质检人员对目标内容对象的人工质检结果，人工质检结果包括质检人员检出的触发片段和未触发规则；

比较机器质检结果和人工质检结果，并根据比较结果确定计算机设备对内容对象进行质检的效果。

在本申请的一个实施例中，比较机器质检结果和人工质检结果，包括：

对计算机设备检出的触发片段和质检人员检出的触发片段进行比较，得到正确触发片段的个数和漏检触发片段的个数；

其中，正确触发片段包括计算机设备与质检人员均检出的触发片段，漏检触发片段包括计算机设备未检出而质检人员检出的触发片段。

在本申请的一个实施例中，根据比较结果确定计算机设备对内容对象进行质检的效果，包括：

获取正确触发片段的个数和漏检触发片段的个数的第一和值；

获取正确触发片段的个数与第一和值的第一比值；

将第一比值确定为查出率，查出率用于指示计算机设备对内容对象进行质检时能够正确检出触发片段的概率。

在本申请的一个实施例中，比较机器质检结果和人工质检结果，还包括：

对计算机设备检出的触发片段和质检人员检出的触发片段进行比较，得到误检触发片段的个数，误检触发片段包括计算机设备检出而质检人员未检出的触发片段；

对计算机设备检出的未触发规则和质检人员检出的未触发规则进行比较，得到正确未触发规则的个数，正确未触发规则包括计算机设备和质检人员均检出的未触发规则。

在本申请的一个实施例中，根据比较结果确定计算机设备对内容对象进行质检的效果，包括：

获取正确触发片段的个数和正确未触发规则的个数的第二和值；

获取正确触发片段的个数、漏检触发片段的个数、误检触发片段的个数和正确未触发规则的个数的第三和值；

获取第二和值和第三和值的第二比值；