[发明专利]基于多层注意力机制的循环神经网络生成标题的方法有效
申请号: | 201810993623.1 | 申请日: | 2018-08-29 |
公开(公告)号: | CN109214003B | 公开(公告)日: | 2019-08-09 |
发明(设计)人: | 王小明;谢杰航;庞光垚;王新燕;林亚光 | 申请(专利权)人: | 陕西师范大学 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06N3/04 |
代理公司: | 北京中济纬天专利代理有限公司 11429 | 代理人: | 覃婧婵 |
地址: | 710062 陕西省*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种基于多层注意力机制的循环神经网络生成标题的方法,其中所述循环神经网络包括过滤层,编码器,注意力机制和解码器四部分,所述方法包括如下步骤:S100:将源文本输入到所述过滤层的多个摘要生成方法后生成多个粗度摘要;S200:将所述多个粗度摘要再分别输入到所述编码器中编码,输出各自的隐藏层表示序列;S300:合并所述隐藏层表示序列,生成表示整个文档的重要信息的总结语义,利用注意力上下文对生成的粗度摘要和编码器内的单词给予关注;S400:把所述注意力上下文和所述总结语义输入到所述解码器中生成相应的标题。该方法相较于现有方法,提高了生成的标题的准确性和可读性。 | ||
搜索关键词: | 循环神经网络 注意力机制 编码器 粗度 解码器 语义 过滤层 隐藏层 多层 注意力 摘要生成 重要信息 源文本 文档 可读性 单词 输出 合并 | ||
【主权项】:
1.一种基于多层注意力机制的循环神经网络生成标题的方法,其中所述循环神经网络包括过滤层,编码器,注意力机制和解码器四部分,所述方法包括如下步骤:S100:将源文本输入到所述过滤层的多个摘要生成方法后生成多个粗度摘要;S200:将所述多个粗度摘要再分别输入到所述编码器中编码,输出各自的隐藏层表示序列;S300:合并所述隐藏层表示序列,生成表示整个文档的重要信息的总结语义,利用注意力上下文对生成的粗度摘要和编码器内的单词给予关注;S400:把所述注意力上下文和所述总结语义输入到所述解码器中生成相应的标题。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于陕西师范大学,未经陕西师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810993623.1/,转载请声明来源钻瓜专利网。