[发明专利]一种基于模态内间协同多线性池化的视频时序定位方法有效
| 申请号： | 201911063010.9 | 申请日： | 2019-10-31 |
| 公开（公告）号： | CN111368870B | 公开（公告）日： | 2023-09-05 |
| 发明（设计）人： | 余宙;俞俊;宋怡君 | 申请（专利权）人： | 杭州电子科技大学 |
| 主分类号： | G06V10/80 | 分类号： | G06V10/80;G06F16/783;G06V10/774;G06V10/82;G06N3/0464 |
| 代理公司： | 杭州君度专利代理事务所(特殊普通合伙) 33240 | 代理人： | 杨舟涛 |
| 地址： | 310018 浙*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于模态内间协同多线性池化的视频时序定位方法。本发明包括以下步骤：1、对视频和文本数据进行数据预处理，提取特征。2、通过模态内间协同多线性池化模块或泛化的模态内间协同多线性池化模块将视频和文本进行特征融合。3、基于视频时序定位任务的神经网络结构。4、模型训练，将多任务损失函数放入优化器，通过反向传播算法对网络参数进行梯度回传和更新。本发明提出一种针对视频时序定位的深度神经网络，特别是提出一种对视频‑文本的数据进行跨模态融合的模块，充分利用各模态的深层次特征，由此模块延伸出一种同时对视频时序信息的交互方法，提高了扩模态特征的表达能力，并且在视频时序定位领域中的获得较好效果。 | ||
| 搜索关键词： | 一种 基于 模态内间 协同 线性 视频 时序 定位 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于杭州电子科技大学，未经杭州电子科技大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201911063010.9/，转载请声明来源钻瓜专利网。
