[发明专利]一种相似文本检索方法、装置、电子设备和存储介质有效
申请号: | 202110784994.0 | 申请日: | 2021-07-12 |
公开(公告)号: | CN113407738B | 公开(公告)日: | 2022-12-13 |
发明(设计)人: | 常永炷;毛晓曦;范长杰;胡志鹏 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F16/383 | 分类号: | G06F16/383;G06F16/35;G06F16/33;G06F40/30;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 深圳紫藤知识产权代理有限公司 44570 | 代理人: | 徐世俊 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 相似 文本 检索 方法 装置 电子设备 存储 介质 | ||
本发明公开了一种相似文本检索方法、装置、电子设备和存储介质,可对待检索的目标文本进行语义分析,得到目标文本的目标语义向量;基于目标语义向量,确定参考文本的语义向量中目标语义向量的相似语义向量,参考文本为目标类型文本;获取相似语义向量对应的参考文本,作为候选相似文本;获取目标语义向量与相似语义向量的相似度,及获取候选相似文本的预设指标;根据该相似度和预设指标,对候选相似文本的进行处理得到目标文本的相似检索结果,由此,本实施例在检索与目标文本相似的目标类型文本时,是基于目标文本的语义向量进行的检索,避免了相关技术中检索出的文本仅包含与输入文本某个词相关的情况,有利于提升检索结果的可靠性。
技术领域
本发明涉及计算机技术领域,具体涉及相似文本检索方法、装置、电子设备和存储介质。
背景技术
目前,搜索引擎为用户提供了关于各种信息的搜索功能,例如,由用户输入词语或一个句子等,搜索引擎会反馈给用户与该词语或句子关联的内容。
在相关技术中,搜索引擎一般是基于词语的词向量进行关联内容的搜索,所以搜索结果与用户输入信息的关联性得不到保证,搜索结果的可靠性不高。
发明内容
本发明实施例提供一种相似文本检索方法、装置、电子设备和存储介质,有利于提升特定类型文本的相似性检索结果的可靠性。
本发明实施例提供一种相似文本检索方法,该方法包括:
对待检索的目标文本进行语义分析,得到所述目标文本的目标语义向量;
基于所述目标语义向量,以及参考文本的语义向量,确定所述语义向量中所述目标语义向量的相似语义向量,其中,所述参考文本为目标类型文本;
获取所述相似语义向量对应的参考文本,作为针对所述目标文本检索到的候选相似文本;
获取所述目标语义向量与所述相似语义向量的相似度,以及获取所述候选相似文本的预设指标,所述预设指标用于指示对应的文本为目标类型文本的概率;
根据所述相似度和所述预设指标,对所述候选相似文本进行处理得到所述目标文本的相似检索结果。
本发明实施例提供一种相似文本检索装置,该装置包括:
输入数据处理单元,用于对待检索的目标文本进行语义分析,得到所述目标文本的目标语义向量;
检索单元,用于基于所述目标语义向量,以及参考文本的语义向量,确定所述语义向量中所述目标语义向量的相似语义向量,其中,所述参考文本为目标类型文本;
文本获取单元,用于获取所述相似语义向量对应的参考文本,作为针对所述目标文本检索到的候选相似文本;
信息获取单元,用于获取所述目标语义向量与所述相似语义向量的相似度,以及获取所述候选相似文本的预设指标,所述预设指标用于指示对应的文本为目标类型文本的概率
数据处理单元,用于根据所述相似度和所述预设指标,对所述候选相似文本进行处理得到所述目标文本的相似检索结果。
可选的,本实施例中,检索单元,用于:
获取参考文本对应的索引图,所述索引图包括多个索引节点,其中,一个索引节点对应一个参考文本的语义向量的向量索引,在所述索引图中一个索引节点与至少k个其他的索引节点之间存在连接关系,存在所述连接关系的索引节点对应的语义向量,满足预设的相似向量判定条件;
基于所述索引节点之间的连接关系、所述索引节点对应的语义向量、以及所述目标语义向量,确定所述索引节点中的所述目标语义向量的相似语义向量。
可选的,本实施例中,检索单元,用于:
从所述索引图中选择一个第一索引节点;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110784994.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种带有吊环的输液瓶
- 下一篇:一种乙醇液相羰基合成制丙酸的反应系统