[发明专利]搜索结果的质量评估方法、装置、服务器和介质

说明书

本发明实施例公开了一种搜索结果的质量评估方法、装置、服务器和介质，其中，该方法包括：获取目标查询对应的至少两个搜索结果列表，其中，不同的搜索结果列表是由不同的搜索排序算法得到；将至少两个搜索结果列表中的搜索结果按照列表顺序进行拆分，得到至少一个搜索结果组，其中，搜索结果组中包括每个搜索结果列表中相同排序位置的搜索结果；获取用户对至少一个搜索结果组的评分结果，并进行拟合，得到目标查询的搜索结果的评估结果。本发明实施例解决了现有评估方法中评估成本较高与评估复杂性较大的问题，降低了评估成本和评估难度，提高了评估效率。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种搜索结果的质量评估方法、装置、服务器和介质。

背景技术

对于一个成熟的互联网搜索引擎而言，为了保证优秀的用户体验，需要持续不断地改进搜索结果排序算法。而判断一个新的搜索排序算法是否达到了预期效果，就需要科学地评估搜索结果质量。

搜索引擎的根本在于找到符合用户需求的信息，这通常可以利用搜索结果与用户输入的关键词之间的相关程度，即结果相关性来反映，因此，结果相关性是评估搜索引擎最重要的指标。在对搜索引擎的搜索结果质量评估过程中，为了避免正反馈的问题，需要引入人力判断。现有技术中依赖人工评估的常用方法包括QU(query-url)评估方法和并排(Side-By-Side)评估方法。

但是，QU评估方法的结果稳定性较低、结果冗余、结果缺乏多样性且不能很好满足查询者的需求；相比于QU评估方法，并排评估方法可以克服QU评估的缺陷，但随之产生了其他缺陷，例如评估成本较高，评估复杂性较大。

发明内容

本发明实施例提供一种搜索结果的质量评估方法、装置、服务器和介质，以实现降低评估成本和评估难度的效果。

第一方面，本发明实施例提供了一种搜索结果的质量评估方法，该方法包括：

获取目标查询对应的至少两个搜索结果列表，其中，不同的搜索结果列表是由不同的搜索排序算法得到；

将所述至少两个搜索结果列表中的搜索结果按照列表顺序进行拆分，得到至少一个搜索结果组，其中，所述搜索结果组中包括每个搜索结果列表中相同排序位置的搜索结果；

获取用户对所述至少一个搜索结果组的评分结果，并进行拟合，得到目标查询的搜索结果的评估结果。

第二方面，本发明实施例还提供了一种搜索结果的质量评估装置，该装置包括：

搜索结果列表获取模块，用于获取目标查询对应的至少两个搜索结果列表，其中，不同的搜索结果列表是由不同的搜索排序算法得到；

搜索结果列表拆分模块，用于将所述至少两个搜索结果列表中的搜索结果按照列表顺序进行拆分，得到至少一个搜索结果组，其中，所述搜索结果组中包括每个搜索结果列表中相同排序位置的搜索结果；

评估结果确定模块，用于获取用户对所述至少一个搜索结果组的评分结果，并进行拟合，得到目标查询的搜索结果的评估结果。

第三方面，本发明实施例还提供了一种服务器，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任一实施例所述的搜索结果的质量评估方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任一实施例所述的搜索结果的质量评估方法。