[发明专利]搜索引擎评测方法、装置、设备以及可读存储介质有效
申请号: | 201811654429.7 | 申请日: | 2018-12-29 |
公开(公告)号: | CN109739768B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 徐永泽;赖长明 | 申请(专利权)人: | 深圳TCL新技术有限公司 |
主分类号: | G06F11/36 | 分类号: | G06F11/36;G06F16/9535 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 张志江 |
地址: | 518052 广东省深圳市南山区中*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 搜索引擎 评测 方法 装置 设备 以及 可读 存储 介质 | ||
本发明公开了一种搜索引擎评测方法、装置、设备和计算机存储介质,该方法包括:获取待测搜索引擎中的测试问句,基于所述测试问句获取搜索结果列表;获取测试问句对应的相关结果集合和预设搜索账号的历史数据,并将所述相关结果集合和所述历史数据输入进推荐算法,基于所述推荐算法生成推荐次序表;将所述搜索结果列表和推荐次序表进行比照测试,获取测试值;获取所述预设搜索账号的预设数量,并基于所述预设数量获取各所述测试值的平均值,将所述平均值作为待测搜索引擎的评测值。解决了现有技术中搜索引擎进行量化测试的准确率不高的技术问题。
技术领域
本发明涉及搜索引擎技术领域,尤其涉及一种搜索引擎评测方法、装置、设备以及计算机可读存储介质。
背景技术
随着互联网行业的迅速发展,搜索引擎已然成为人们生活中必不可少的一部分。除了像Google、百度这样的大型互联网企业制作的网页搜索引擎,专门针对各行各业的专题类搜索引擎也得到了越来越多的重视。因此,大量的企业产生了制作专门针对于自家业务的搜索引擎的需求。
而在搜索引擎系统的测试流程中,往往需要线上测试来完成。但是,对于搜索引擎业务经验不足的企业来说,不经过线下测试直接上线一款搜索引擎产品是有很大风险的。所以我们往往需要对原本需要线上测试的性能增加一个线下的预演测试,即聘请一些行业专家进行人工测验。这在人工和时间成本上的消耗都是巨大的,且准确度十分依赖于测试员的业务和工作素质。
发明内容
本发明的主要目的在于提供一种搜索引擎评测方法、装置、设备和计算机存储介质,旨在解决现有技术中搜索引擎进行量化测试的准确率不高的技术问题。
为实现上述目的,本发明提供一种搜索引擎评测方法,所述搜索引擎评测方法包括以下步骤:
获取待测搜索引擎中的测试问句,基于所述测试问句获取搜索结果列表;
获取测试问句对应的相关结果集合和预设搜索账号的历史数据,并将所述相关结果集合和所述历史数据输入进推荐算法,基于所述推荐算法生成推荐次序表;
将所述搜索结果列表和推荐次序表进行比照测试,获取测试值;
获取所述预设搜索账号的预设数量,并基于所述预设数量获取各所述测试值的平均值,将所述平均值作为待测搜索引擎的评测值。
可选地,所述测试值包括相关质量评估值,
所述将所述搜索结果列表和推荐次序表进行比照测试,以获取测试值的步骤,包括:
获取所述推荐次序表中的各推荐结果和搜索结果列表中的各搜索结果;
将各所述推荐结果和各所述搜索结果进行比照测试,统计并获取与所述推荐结果匹配的搜索结果的第一数量;
获取各所述搜索结果的第二数量和各所述推荐结果的第三数量,并确定所述第一数量分别在所述第二数量和所述第三数量中占据的比例值,并将所述比例值作为相关质量评估值。
可选地,所述相关质量评估值包括准确率值和召回率值,所述比例值包括第一比例值和第二比例值,
所述确定所述第一数量分别在所述第二数量和所述第三数量中占据的比例值,并将所述比例值作为相关质量评估值的步骤,包括:
获取所述第一数量和所述第二数量的第一比例值,并将所述第一比例值作为准确率值;
获取所述第一数量和所述第三数量之间的第二比例值,并将所述第二比例值作为召回率值。
可选地,所述测试值包括顺序质量评估值,
所述将所述搜索结果列表和推荐次序表进行比照测试,以获取测试值的步骤,还包括:
获取各所述初级结果在所述搜索结果列表中的第一排序位置;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳TCL新技术有限公司,未经深圳TCL新技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811654429.7/2.html,转载请声明来源钻瓜专利网。