[发明专利]检索式问答方法、模型训练方法、服务器及存储介质有效
申请号: | 202010059894.7 | 申请日: | 2020-01-19 |
公开(公告)号: | CN111309878B | 公开(公告)日: | 2023-08-22 |
发明(设计)人: | 陈晓军;崔恒斌 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 郭曼 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 检索 问答 方法 模型 训练 服务器 存储 介质 | ||
本说明书提供一种检索式问答方法,包括:对接收的第一文本进行分词,得到至少一个第一词语;确定所述至少一个第一词语的词权重;根据所述至少一个第一词语从知识库召回至少一个候选问题‑答案对;针对每个候选问题‑答案对,分别将候选问题‑答案对中的问题作为第二文本,确定所述第二文本包含的至少一个第二词语及其词权重;根据所述至少一个第一词语、所述至少一个第二词语及其词权重确定第一文本和候选问题‑答案对中每个问题的匹配度;根据确定的匹配度返回至少一个候选问题‑答案对中的答案。本说明书还提供了实现了检索式问答的服务器、电子设备以及计算机可读存储介质。
技术领域
本说明书涉及自然语言处理技术领域,尤其涉及一种检索式问答方法、模型训练方法、服务器、电子设备以及计算机可读存储介质。
背景技术
问答系统是信息检索的一种高级形式,能够理解用户用自然语言提出的问题,并通过检索语料库、知识图谱或问答知识库返回简洁、准确的匹配答案。相较于搜索引擎,问答系统能更好地理解用户提问的真实意图,进一步能更有效地满足用户的信息需求。问答系统是目前人工智能和自然语言处理领域中一个倍受关注并具有广泛发展前景的研究方向。
问答系统处理的对象主要包括用户的问题以及答案。根据问题所属的知识领域、答案来源或答案的反馈机制可以将问答系统划分成多种类型。其中,面向常用问题集(FAQ)的检索式问答具体是指根据用户的问题去常用问题集的知识库找到最合适的答案并反馈给用户。因此,如何找到最合适的答案是面向FAQ的检索式问答系统需要解决的关键问题。
发明内容
有鉴于此,本说明书的实施例提出了一种检索式问答方法,该方法可以包括:对接收的第一文本进行分词,得到至少一个第一词语;确定所述至少一个第一词语的词权重;根据所述至少一个第一词语从知识库召回预定数量的候选问题-答案对;针对每个候选问题-答案对,分别将所述候选问题-答案对中的问题作为第二文本,确定所述第二文本包含的至少一个第二词语及其词权重;并根据所述至少一个第一词语、所述至少一个第二词语及其词权重确定所述第一文本和所述第二文本的匹配度;以及根据确定的所述第一文本和所述候选问题-答案对中每个第二文本的匹配度返回至少一个候选问题-答案对中的答案。
在本说明书的实施例中,上述确定所述至少一个第一词语的词权重可以包括:分别将所述至少一个第一词语输入经过训练的词权重模型,得到所述至少一个第一词语的词权重。
在本说明书的实施例中,上述确定所述第二文本包含的至少一个第二词语及其词权重可以包括:从所述知识库获取所述第二文本包含的至少一个第二词语及其词权重;或,对所述第二文本进行分词,得到所述至少一个第二词语,并分别将所述至少一个第二词语输入经过训练的词权重模型,得到所述至少一个第二词语的词权重。
在本说明书的实施例中,上述根据所述至少一个第一词语、所述至少一个第二词语及其词权重确定所述第一文本和所述候选问题-答案对中每个问题的匹配度可以包括:
根据所述至少一个第一词语的词权重和所述至少一个第二词语的词权重确定所述第一文本和第二文本的词权重相关矩阵,其中,所述词权重相关矩阵中的每个元素Bij代表所述第一文本中第i个词语和所述第二文本中第j个词语的词权重相关系数;
确定所述第一文本和第二文本的注意力权值矩阵,其中,所述注意力权值矩阵中的每个元素Aij代表所述第一文本中第i个词语对所述第二文本中第j个词语的匹配度;
使用所述词权重相关矩阵对所述注意力权值矩阵进行更新;以及
将所述更新后的注意力权值矩阵、第一文本以及第二文本输入基于注意力机制的相似度匹配模型,确定所述第一文本和所述第二文本的匹配度。
在本说明书的实施例中,上述第一文本中第i个词语和所述第二文本中第j个词语的词权重相关系数为所述第一文本中第i个词语和所述第二文本中第j个词语的词权重的乘积。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010059894.7/2.html,转载请声明来源钻瓜专利网。