[发明专利]基于残差结构和双向融合注意力的跨度提取阅读理解方法有效
申请号: | 202210599756.7 | 申请日: | 2022-05-30 |
公开(公告)号: | CN115080715B | 公开(公告)日: | 2023-05-30 |
发明(设计)人: | 王勇;陈秋怡 | 申请(专利权)人: | 重庆理工大学 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06F17/15 |
代理公司: | 成都东唐智宏专利代理事务所(普通合伙) 51261 | 代理人: | 晏辉 |
地址: | 401320 *** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及自然语言处理技术领域,尤其涉及一种基于残差结构和双向融合注意力的跨度提取阅读理解方法,一种基于残差结构和双向融合注意力的跨度提取阅读理解方法,包括以下步骤:采用不同尺度的卷积核对问题和文章分别卷积,得到不同语义空间下的特征,再分别计算同一尺度卷积核下的问题和文章的相似度分数,最后选取最大特征作为最终的相似度分数矩阵。本发明提出双向融合注意力机制;不仅计算了基于问题的文章表示向量,同时利用提出的针对问题的层叠注意力机制,计算基于文章的问题向量表示,并进行融合拼接以预测答案,并提出残差结构来连接从预训练语言模型输出的具有原始语义的特征向量。 | ||
搜索关键词: | 基于 结构 双向 融合 注意力 跨度 提取 阅读 理解 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆理工大学,未经重庆理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210599756.7/,转载请声明来源钻瓜专利网。