[发明专利]一种多尺度双流注意力视频语言事件预测的方法及装置在审
申请号: | 202210412836.7 | 申请日: | 2022-04-19 |
公开(公告)号: | CN115019137A | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 王丹力;郑楠;马鑫伟 | 申请(专利权)人: | 中国科学院自动化研究所 |
主分类号: | G06V10/80 | 分类号: | G06V10/80;G06V10/52;H04N21/488 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 乔慧 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种多尺度双流注意力视频语言事件预测的方法及装置,方法包括:获取原始输入数据;原始输入数据中包括一个目标视频流、目标视频流对应的字幕以及多个未来候选事件;将原始输入数据输入多尺度双流注意力视频语言事件预测模型,得到目标视频流的事件预测结果。多尺度双流注意力视频语言事件预测模型包括多尺度视频处理模块、双流跨模态融合模块以及事件预测模块。基于此,全面的提取特征,并减少冗余特征,避免不同模态之间相互干扰造成的不利影响,有效的提高事件预测的准确率。 | ||
搜索关键词: | 一种 尺度 双流 注意力 视频 语言 事件 预测 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所,未经中国科学院自动化研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210412836.7/,转载请声明来源钻瓜专利网。