[发明专利]评估标签数据的方法和装置

权利要求书

1.一种评估标签数据的方法，其特征在于，包括：

根据多个待评估标签数据向用户进行特定信息展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格；和/或

根据所述待评估标签数据向用户进行特定信息展示，将该特定信息展示的效果数据确定为初始效果数据；其中，任一待评估标签数据中包括用户标识；将所述待评估标签数据、与所述待评估标签数据中的用户标识进行错位处理，根据错位处理得到的数据向用户进行特定信息展示，将该特定信息展示的效果数据确定为错位效果数据；在初始效果数据优于错位效果数据时，将所述待评估标签数据评估为合格；所述错位处理是指改变待评估标签数据与该待评估标签数据中用户标识的对应关系。

2.根据权利要求1所述的方法，其特征在于，所述根据多个待评估标签数据向用户进行特定信息展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格包括：

根据所述待评估标签数据获取候选特定信息，在候选特定信息中确定投放特定信息向用户展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格；和/或

将所述待评估标签数据接入预先建立的排序模型；根据预设的召回策略获取候选特定信息，在该候选特定信息中利用该排序模型确定投放特定信息向用户展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格。

3.根据权利要求2所述的方法，其特征在于，所述特定信息为广告。

4.根据权利要求3所述的方法，其特征在于，所述根据所述待评估标签数据获取候选特定信息，在候选特定信息中确定投放特定信息向用户展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格包括：

在预设的第一比例的流量，根据所述待评估标签数据获取候选广告，在候选广告中利用预设的排序策略确定投放广告向用户展示；在预设的第二比例的流量，随机获取候选广告，在该候选广告中利用该排序策略确定投放广告向用户展示；其中，第一比例小于第二比例；所述流量为访问量；

在第一比例流量的展示效果数据优于第二比例流量的展示效果数据时：在预设的第三比例的流量，根据所述待评估标签数据获取候选广告，在候选广告中利用该排序策略确定投放广告向用户展示；在预设的第四比例的流量，随机获取候选广告，在该候选广告中利用该排序策略确定投放广告向用户展示；其中，第三比例大于第四比例；

在第三比例流量的展示效果数据优于第四比例流量的展示效果数据时，将所述待评估标签数据评估为合格。

5.根据权利要求4所述的方法，其特征在于，所述方法进一步包括：

在所述在第三比例流量的展示效果数据优于第四比例流量的展示效果数据时，将所述待评估标签数据确定为合格之后，在全部流量根据所述待评估标签数据获取候选广告，在该候选广告中利用该排序策略确定投放广告向用户展示。

6.根据权利要求3所述的方法，其特征在于，所述根据预设的召回策略获取候选特定信息，在该候选特定信息中利用该排序模型确定投放特定信息向用户展示；在展示效果数据符合预设的第一判别条件时，将所述待评估标签数据评估为合格包括：

在预设的第五比例的流量，根据预设的召回策略获取候选广告；在该候选广告中，利用接入所述待评估标签数据的排序模型确定投放广告向用户展示；在预设的第六比例的流量，根据该召回策略获取候选广告；在该候选广告中，利用预先建立的排序模型确定投放广告向用户展示；其中，第五比例小于第六比例；所述流量为访问量；

在第五比例流量的展示效果数据优于第六比例流量的展示效果数据时：在预设的第七比例的流量，根据预设的召回策略获取候选广告；在该候选广告中，利用接入所述待评估标签数据的排序模型确定投放广告向用户展示；在预设的第八比例的流量，根据该召回策略获取候选广告；在该候选广告中，利用预先建立的排序模型确定投放广告向用户展示；其中，第七比例大于第八比例；

在第七比例流量的展示效果数据优于第八比例流量的展示效果数据时，将所述待评估标签数据评估为合格。