[发明专利]一种基于动作的关系网络视频问答系统及方法有效
申请号: | 202011049187.6 | 申请日: | 2020-09-29 |
公开(公告)号: | CN112084319B | 公开(公告)日: | 2021-03-16 |
发明(设计)人: | 邵杰;张骥鹏;高联丽;徐行;申恒涛 | 申请(专利权)人: | 四川省人工智能研究院(宜宾) |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 成都正华专利代理事务所(普通合伙) 51229 | 代理人: | 李蕊 |
地址: | 644000 四川省宜宾市临*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种基于动作的关系网络视频问答系统及方法,属于计算语言学和计算机视觉领域,包括编码模块、问题特征模块、动作检测模块、关系转换网络模块以及解码模块。本发明使用时序动作检测网络的结果辅助视频特征的编码,强调了视频的动作因素,同时通过检测结果得到的动作概率分布避免错误的动作检测带来的误差累积,将动作概率分布与初始的视频特征被一起输入到神经网络的编码器中,以学习视频特征使最终的视频特征能够包含动作信息,最后,将输出的视频特征与问题特征输入一个多头的关系转换器网络中,通过此网络输出最后的结果,本发明通过增强问题中的动作特征来提高任务性能,并辅以关系转换器网络可以取得更好的解题效果。 | ||
搜索关键词: | 一种 基于 动作 关系 网络 视频 问答 系统 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川省人工智能研究院(宜宾),未经四川省人工智能研究院(宜宾)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011049187.6/,转载请声明来源钻瓜专利网。