[发明专利]一种评价搜索性能的方法、装置、设备及可读存储介质在审
申请号: | 202110342638.3 | 申请日: | 2021-03-30 |
公开(公告)号: | CN113065065A | 公开(公告)日: | 2021-07-02 |
发明(设计)人: | 刘佳;赵顺 | 申请(专利权)人: | 广联达科技股份有限公司 |
主分类号: | G06F16/9535 | 分类号: | G06F16/9535;G06F16/957 |
代理公司: | 北京英特普罗知识产权代理有限公司 11015 | 代理人: | 程超;邵煜程 |
地址: | 100193 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 评价 搜索 性能 方法 装置 设备 可读 存储 介质 | ||
本发明公开了一种评价搜索性能的方法、装置、设备及可读存储介质,所述方法包括:获取设定时间段内目标用户针对目标搜索条件的衍生行为数据;其中,衍生行为数据是用户基于与搜索条件对应的搜索结果触发的行为数据;按照行为类型对获取到的所有衍生行为数据进行分类统计,并根据分类统计结果计算出针对所述目标搜索条件的搜索准确率;获取与所述目标搜索条件对应的搜索结果总数量,并根据所述搜索结果总数量和所述搜索准确率计算出针对所述目标搜索条件的搜索召回率;根据所述搜索准确率和所述搜索召回率,对与所述目标搜索条件对应的搜索性能进行评价;本发明可以更深层次、更全面、更精确的评价搜索性能。
技术领域
本发明涉及搜索评价技术领域,特别涉及一种评价搜索性能的方法、装置、设备及可读存储介质。
背景技术
在工程建筑领域,设计师在设计建筑模型时,通常会用到模型构件进行建模,通过搜索引擎以查找到模型构件是设计建模中非常重要的一环,因此搜索引擎是否能够找到准确、合适的模型构件就尤为重要;目前,通常采用Cranfield评价体系对搜索引擎的搜索性能进行评价;在Cranfield评价体系中,会使用Precision准确率和Recall召回率两个指标来对搜索引擎的搜索性能进行评价;但是,Precision和Recall指标仅仅是基于与搜索条件对应的实际搜索结果和正确搜索结果计算得到的,并没有考虑到其他因素;若仅通过现有的Precision和Recall指标进行搜索性能的评价,会出现评价偏差,导致评价结果不准确的问题。
发明内容
本发明的目的在于提供一种评价搜索性能的方法、装置、设备及可读存储介质,可以更深层次、更全面、更精确的评价搜索性能。
根据本发明的一个方面,提供了一种评价搜索性能的方法,所述方法包括:
获取设定时间段内目标用户针对目标搜索条件的衍生行为数据;其中,衍生行为数据是用户基于与搜索条件对应的搜索结果触发的行为数据;
按照行为类型对获取到的所有衍生行为数据进行分类统计,并根据分类统计结果计算出针对所述目标搜索条件的搜索准确率;
获取与所述目标搜索条件对应的搜索结果总数量,并根据所述搜索结果总数量和所述搜索准确率计算出针对所述目标搜索条件的搜索召回率;
根据所述搜索准确率和所述搜索召回率,对与所述目标搜索条件对应的搜索性能进行评价。
可选的,在所述获取设定时间段内目标用户针对目标搜索条件的衍生行为数据之前,所述方法还包括:
获取用户触发的搜索条件,并生成与所述用户对应的用户标识以及与所述搜索条件对应的搜索摘要;
判断在预设的缓存中是否存在包含所述用户标识和所述搜索摘要的搜索记录;
若是,则获取包含在所述搜索记录中的会话ID;若否,则生成唯一的会话ID,并将生成的会话ID、所述用户标识和所述搜索摘要作为一个新的搜索记录存储至所述缓存中;
获取所述用户针对所述搜索条件的衍生行为数据,使用所述会话ID对获取到的每个衍生行为数据进行标记,并将标记后的衍生行为数据存储至所述缓存中。
可选的,所述获取设定时间段内目标用户针对目标搜索条件的衍生行为数据,包括:
获取所述目标用户的用户标识;
从所述缓存中确定出包含所述用户标识的搜索记录;
从确定出的所有搜索记录中筛选出包含与所述目标搜索条件对应的搜索摘要的目标搜索记录;
分别从每个目标搜索记录中获取出目标会话ID;
从所述缓存中获取标记有所述目标会话ID的衍生行为数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广联达科技股份有限公司,未经广联达科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110342638.3/2.html,转载请声明来源钻瓜专利网。