[发明专利]业务数据标注方法和装置

权利要求书

1.一种业务数据标注方法，其特征在于，包括以下步骤：

获取业务数据，利用第一标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据；

将所述业务数据对应的第一标注数据发送至客户端；

接收所述客户端返回的所述业务数据对应的第二标注数据；

利用所述业务数据和所述业务数据对应的第二标注数据构建第二标注模型；

重复上述步骤直至所述第二标注模型满足预设条件，以利用所述第二标注模型对目标业务数据进行标注，得到所述目标业务数据对应的标注数据。

2.根据权利要求1所述的方法，其特征在于，在利用第一标注模型对所述业务数据进行标注之前，还包括：

获取业务数据集和第二标注数据集，其中，所述第二标注数据集包括所述业务数据集中各业务数据对应的第二标注数据；

利用所述业务数据集和所述第二标注数据集构建第一标注模型。

3.根据权利要求1所述的方法，其特征在于，利用所述业务数据和所述业务数据对应的第二标注数据构建第二标注模型，包括：

确定第二标注数据的数量是否大于或等于预设阈值；

在第二标注数据的数量大于或等于预设阈值的情况下，基于所述第二标注数据以及所述第二标注数据对应的业务数据构建第二标注模型。

4.根据权利要求1所述的方法，其特征在于，利用第一标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据，包括：

获取最新构建的多个第二标注模型；

确定所述多个第二标注模型中各标注模型的预测效果指数；

根据所述各标注模型的预测效果指数，确定目标标注模型；

利用所述目标标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据。

5.根据权利要求1所述的方法，其特征在于，在利用所述业务数据和所述业务数据对应的第二标注数据构建第二标注模型之后，还包括：

计算所述第二标注模型的预测效果指数；

判断所述预测效果指数是否满足预设条件；

在判断出所述预测效果指数满足预设条件的情况下，确定所述第二标注模型满足预设条件。

6.根据权利要求4或5所述的方法，其特征在于，所述预测效果指数包括以下至少之一：准确率、精确率、召回率、F1分数、PR曲线、ROC曲线和AUC。

7.根据权利要求1所述的方法，其特征在于，利用第一标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据，包括：

确定所述第一标注模型是否更新；

在确定所述第一标注模型更新的情况下，利用更新后的第一标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据。

8.一种业务数据标注装置，其特征在于，包括：

标注模块，用于获取业务数据，利用第一标注模型对所述业务数据进行标注，得到所述业务数据对应的第一标注数据；

发送模块，用于将所述业务数据对应的第一标注数据发送至客户端，以对所述第一标注数据进行人工核验；

接收模块，用于接收所述客户端返回的所述业务数据对应的第二标注数据；

构建模块，用于利用所述业务数据和所述业务数据对应的第二标注数据构建第二标注模型；

迭代模块，用于调取所述标注模块、所述发送模块、所述接收模块以及所述构建模块重复执行直至所述第二标注模型满足预设条件，以利用所述第二标注模型对目标业务数据进行标注，得到所述目标业务数据对应的标注数据。

9.一种计算机设备，其特征在于，包括处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机指令，其特征在于，所述指令被执行时实现权利要求1至7中任一项所述方法的步骤。