[发明专利]一种弱监督视频时间定位方法和系统在审
| 申请号： | 202210105568.4 | 申请日： | 2022-01-28 |
| 公开（公告）号： | CN116561369A | 公开（公告）日： | 2023-08-08 |
| 发明（设计）人： | 刘洋;郑明航;黄彦杰;陈庆超;彭宇新 | 申请（专利权）人： | 北京大学 |
| 主分类号： | G06F16/732 | 分类号： | G06F16/732;G06V10/80;G06V10/774 |
| 代理公司： | 北京君尚知识产权代理有限公司 11200 | 代理人： | 邱晓锋 |
| 地址： | 100871 北*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种弱监督视频时间定位方法和系统。该方法包括：对视频、查询语句用预训练模型分别提取特征；将视频和语言两个模态的信息进行融合，预测端到端可学习的高斯掩模并视为正样本，将视频中被高斯掩模抑制的部分认为是简单负样本，将整段视频认为是困难负样本；引入基于掩模的注意力机制，收集被掩模着重强调的视频帧的上下文信息；使用基于掩模的注意力机制，配合重建损失函数，对原始查询语句进行重建；设计了视频内对比损失函数，让正负样本的区别更加明显。本发明中使用的端到端可学习的高斯掩模，可以让正样本生成的效率和质量更高；同时本发明中涉及到的负样本学习难度更大，有助于模型在更加复杂的场景中更准确地完成定位工作。 | ||
| 搜索关键词： | 一种 监督 视频 时间 定位 方法 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京大学，未经北京大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210105568.4/，转载请声明来源钻瓜专利网。
