[发明专利]基于混合注意力机制的视频对象定位方法及系统有效
申请号: | 202111577033.9 | 申请日: | 2021-12-22 |
公开(公告)号: | CN113971208B | 公开(公告)日: | 2022-05-06 |
发明(设计)人: | 刘萌;周迪;田传发;齐孟津;郭杰;马玉玲 | 申请(专利权)人: | 山东建筑大学 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/75;G06F16/78;G06F16/783;G06F40/30 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 李圣梅 |
地址: | 250101 山东省济*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出了基于混合注意力机制的视频对象定位方法及系统,本发明属于视频处理技术领域,包括:获得视频数据以及自然语言描述数据;针对视频数据,提取对象提议的视觉特征、对象提议的位置信息以及全局视觉特征;针对自然语言描述数据,提取词隐藏向量表示,利用文本自注意力机制处理词隐藏向量表示,获取语义角色文本特征;针对提取对象提议的视觉特征,剔除每个对象提议中不被语义角色文本特征中的语义角色期待的特征表示,获得被增强的对象提议的视觉特征;对被增强的对象提议视觉特征与视频的全局视觉特征进行初步融合,获得多模态特征;对多模态特征、对象提议的位置信息以及语义角色文本特征进行跨模态特征融合,进行视频对象定位。 | ||
搜索关键词: | 基于 混合 注意力 机制 视频 对象 定位 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东建筑大学,未经山东建筑大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111577033.9/,转载请声明来源钻瓜专利网。
- 上一篇:一种智能仿生手的动作预判方法
- 下一篇:一种导航系统的模糊度固定方法和装置