[发明专利]基于两阶段运动建模和注意力的动作视频分类方法和系统有效
| 申请号： | 202210980577.8 | 申请日： | 2022-08-16 |
| 公开（公告）号： | CN115063731B | 公开（公告）日： | 2022-11-11 |
| 发明（设计）人： | 卢修生;赵思成;程乐超;苏慧;宋明黎 | 申请（专利权）人： | 之江实验室 |
| 主分类号： | G06V20/40 | 分类号： | G06V20/40;G06V10/764;G06V10/774;G06V10/80;G06V10/82;G06N3/04;G06N3/08 |
| 代理公司： | 北京志霖恒远知识产权代理有限公司 11435 | 代理人： | 戴莉 |
| 地址： | 311121 浙江*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于两阶段运动建模和注意力的动作视频分类方法和系统，包括以下步骤：步骤S1：构建采样帧输入至主干网络；步骤S2：第一阶段段内运动信息建模，输出包含短时运动信息的视频卷积特征；步骤S3：第二阶段段间运动信息建模，输出融合了短时运动信息和长时运动信息的空间块注意力视频卷积特征；步骤S4：经过全连接层后得到各视频段的分类结果并融合，训练网络。本发明利用卷积神经网络的多层次结构，在网络的较低层和较高层分别提取段内运动信息和段间运动信息，达到分阶段运动综合建模的目的。此外，本发明计算视频卷积特征各空间块之间的注意力关系，使得网络同时具备了卷积操作和注意力机制的短距离和长距离建模能力。 | ||
| 搜索关键词： | 基于 阶段 运动 建模 注意力 动作 视频 分类 方法 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于之江实验室，未经之江实验室许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210980577.8/，转载请声明来源钻瓜专利网。
