[发明专利]基于宏观到微观语义关联对比的视频自监督表征学习方法在审
申请号: | 202211237958.3 | 申请日: | 2022-10-10 |
公开(公告)号: | CN115713665A | 公开(公告)日: | 2023-02-24 |
发明(设计)人: | 周宇;方波;王伟平 | 申请(专利权)人: | 中国科学院信息工程研究所 |
主分类号: | G06V10/774 | 分类号: | G06V10/774;G06V20/40;G06V10/764;G06V10/82;G06N3/0464;G06N3/048;G06N3/0895 |
代理公司: | 北京君尚知识产权代理有限公司 11200 | 代理人: | 司立彬 |
地址: | 100093 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于宏观到微观语义关联对比的视频自监督表征学习方法。本发明首先创建一视频自监督时空表示模型,其包括时域模块MaMiCo与空域模块MaMiCo;所述时域模块MaMiCo包括第一编码器、平均全局映射头,所述空域模块MaMiCo包括第二编码器、密集映射头,所述第一编码器与第二编码器共享参数;然后在视频数据中以金字塔的形式采样全局片段、局部片段以及静止片段用于训练视频自监督时空表示模型,其中时域MaMiCo关注在学习全局片段与局部片段的时域语义关联,空域MaMiCo旨在学习局部片段与静止片段的空域语义关联;然后将待处理视频输入训练后的第一编码器或第二编码器,得到该待处理视频的特征图。 | ||
搜索关键词: | 基于 宏观 微观 语义 关联 对比 视频 监督 表征 学习方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院信息工程研究所,未经中国科学院信息工程研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202211237958.3/,转载请声明来源钻瓜专利网。