[发明专利]一种基于先验知识和对象敏感的视频问答方法有效
申请号: | 202210661707.1 | 申请日: | 2022-06-10 |
公开(公告)号: | CN114936297B | 公开(公告)日: | 2023-03-14 |
发明(设计)人: | 许辉;曾鹏鹏;张浩楠;赵磊;宋井宽 | 申请(专利权)人: | 四川省人工智能研究院(宜宾) |
主分类号: | G06F16/435 | 分类号: | G06F16/435;G06F16/45;G06F16/48 |
代理公司: | 成都正德明志知识产权代理有限公司 51360 | 代理人: | 万雪松 |
地址: | 644000 四川省宜宾市宜宾*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于先验知识和对象敏感的视频问答方法,首先提出了一种新的先验知识探索方式,即先验知识探索网络PKE,它以信息检索的方式引入了先验知识,以促进视频问答模型的推理能力;同时,PKE还可以通过将检索到的句子作为推理的证据来提供额外的可解释性。本发明还提出了一种新的对象敏感表示学习范式,即对象敏感表征网络ORL,它探索了跨空间和时间域的语义丰富的对象表示;该范式充分考虑了结构化的视觉信息,更符合人类注意机制的本质。本发明解决了传统基于注意力的视频问答方法难以模拟人类认知推理、忽略结构化视觉信息导致的视频分析推理能力差、答案预测不准确等问题。 | ||
搜索关键词: | 一种 基于 先验 知识 对象 敏感 视频 问答 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川省人工智能研究院(宜宾),未经四川省人工智能研究院(宜宾)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210661707.1/,转载请声明来源钻瓜专利网。