[发明专利]一种基于互补注意力机制循环卷积解码的视频描述方法在审
| 申请号： | 201910192251.7 | 申请日： | 2019-03-14 |
| 公开（公告）号： | CN109919114A | 公开（公告）日： | 2019-06-21 |
| 发明（设计）人： | 金涛;李英明;张仲非 | 申请（专利权）人： | 浙江大学 |
| 主分类号： | G06K9/00 | 分类号： | G06K9/00;G06K9/62 |
| 代理公司： | 杭州宇信知识产权代理事务所(普通合伙) 33231 | 代理人： | 王健 |
| 地址： | 310058 浙江*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于互补注意力机制循环卷积解码的视频描述方法，用于为给定视频片段生成简短准确的描述。具体包括如下步骤：获取用于训练视频描述生成模型的视频数据集，并定义算法目标；对视频数据集中的全局时序特征以及局部语义特征建模；基于全局‑局部特征在循环卷积解码器上建立互补注意力机制；使用所述模型生成输入视频的描述。本发明适用于真实视频场景的视频描述生成，面对各类复杂情况具有较佳的效果和鲁棒性。 | ||
| 搜索关键词： | 注意力机制 视频描述 循环卷积 解码 真实视频场景 解码器 对视频数据 定义算法 局部特征 局部语义 模型生成 生成模型 时序特征 视频片段 视频数据 输入视频 特征建模 训练视频 鲁棒性 全局 | ||
【主权项】：
1.一种基于互补注意力机制循环卷积解码的视频描述方法，其特征在于，包括以下步骤：S1、获取用于训练视频描述生成模型的视频数据集，所述视频数据集包括多个样本视频，并定义算法目标；S2、对视频数据集中每个样本视频的全局时序特征以及局部语义特征建模，得到样本视频的全局时序特征以及局部语义特征；S3、通过全局‑局部视频特征在循环卷积解码器上建立互补注意力机制，基于样本视频的特征建立描述生成模型；S4、使用所述描述生成模型生成输入视频的描述。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浙江大学，未经浙江大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910192251.7/，转载请声明来源钻瓜专利网。
- 上一篇：船舶监测方法和系统以及港口运营预测方法和系统
- 下一篇：指纹模组工装
