[发明专利]数据检索方法、装置、计算机设备和存储介质在审
申请号: | 202211681406.1 | 申请日: | 2022-12-27 |
公开(公告)号: | CN116049350A | 公开(公告)日: | 2023-05-02 |
发明(设计)人: | 李慧琼;张悦 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/335;G06F40/284;G06F40/211 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 景怀宇 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 检索 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种数据检索方法、装置、计算机设备和存储介质。本申请涉及大数据技术领域。所述方法包括:获取用户输入的文本信息;通过语句划分模型,将所述文本信息划分为多个语句,并对各所述语句进行编码转化处理,得到各所述语句对应的高维语句特征向量;通过哈希函数,生成所述高维语句特征向量对应的哈希码,在数据库中查询与所述高维语句特征向量的哈希码相同的哈希码,并将所述相同哈希码对应的待选数据作为文本信息对应的目标检索数据。采用本方法能够提升检索的精准度。
技术领域
本申请涉及大数据技术领域,特别是涉及一种数据检索方法、装置、计算机设备和存储介质。
背景技术
随着大数据信息的发展,数据复杂化和数据多样化使得数据精细化处理出现很大的困难。因此,一个高效的数据检索方法是现阶段需要研究的重点。
传统的数据检索方法是通过哈希函数将高维的特征向量转化为低维的二值哈希码,在检索时,只需将待检索数据通过训练好的哈希函数转化成哈希码,再将该哈希码与数据库中所有数据的哈希码进行相似性计算,根据计算出的相似性高低返回检索结果。但是哈希函数在转化为而二值哈希码的过程中,对文本信息进行降维处理,导致该哈希码中包含文本信息的语句信息较少,导致数据检索的精准度较低。
发明内容
基于此,有必要针对上述技术问题,提供一种数据检索方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
第一方面,本申请提供了一种数据检索方法。所述方法包括:
获取用户输入的文本信息;
通过语句划分模型,将所述文本信息划分为多个语句,并对各所述语句进行编码转化处理,得到各所述语句对应的高维语句特征向量;
通过哈希函数,生成所述高维语句特征向量对应的哈希码,在数据库中查询与所述高维语句特征向量的哈希码相同的哈希码,并将所述相同哈希码对应的待选数据作为文本信息对应的目标检索数据。
可选的,所述语句划分模型包括词嵌入层和划分层,所述通过语句划分模型,将所述文本信息划分为多个语句,并对各所述语句进行编码转化处理,得到各所述语句对应的高维语句特征向量,包括:
将所述文本信息中的每个分词,通过所述词嵌入层,确定多个词嵌入向量,并对每个分词在所述文本信息中的前后顺序,进行位置编码,得到所述分词的位置编码向量;
将所述文本信息中的每个语句,通过所述划分层,划分为多个短语句,并对各所述短语句进行转化处理,得到所述语句对应的多个短语句向量;
根据所述文本信息中的语句所包含的分词的词嵌入向量、所述语句所包含的分词的位置编码向量、以及所述语句对应的短语句向量,确定所述文本信息中的各语句的高维语句特征向量。
可选的,所述根据所述文本信息中的语句所包含的分词的词嵌入向量、所述语句所包含的分词的位置编码向量、以及所述语句对应的短语句向量,确定所述文本信息中的各语句的高维语句特征向量,包括:
针对每个语句,将所述语句的所包含的分词的词嵌入向量、所述语句所包含的分词的位置编码向量、以及所述语句对应的短语句向量进行向量叠加处理,得到所述语句的高维语句特征向量。
可选的,所述通过哈希函数,生成所述高维语句特征向量对应的哈希码,在数据库中查询与所述高维语句特征向量的哈希码相同的哈希码所对应的待选数据,并将所述相同哈希码的待选数据作为文本信息对应的目标检索数据,包括:
针对每个高维语句特征向量,通过哈希函数,生成所述高维语句特征向量对应的哈希码;
在数据库中选择任意一个待选数据,并判断所述待选数据的哈希码中的哈希位是否与所述高维语句特征向量对应的哈希码中的哈希位一致;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211681406.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置