[发明专利]一种自然语言指导的视频摘要方法在审
| 申请号： | 202210652477.2 | 申请日： | 2022-06-07 |
| 公开（公告）号： | CN115033736A | 公开（公告）日： | 2022-09-09 |
| 发明（设计）人： | 金永刚;郑婧;马海钢 | 申请（专利权）人： | 浙江大学 |
| 主分类号： | G06F16/738 | 分类号： | G06F16/738;G06F40/30;G06N3/04;G06N3/08;G06V10/80;G06V10/82;G06V20/40 |
| 代理公司： | 杭州天勤知识产权代理有限公司 33224 | 代理人： | 王琛 |
| 地址： | 310058 浙江*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种自然语言指导的视频摘要方法，包括：将视频文件分解成帧序列，提取帧图像特征；提取帧语义特征和文本语义特征，进行空间余弦相似度计算，得到注意力权重；搭建自然语言指导的视频摘要模型；整体网络模型进行模型训练；根据帧重要性分数序列，合理选择视频摘要。本发明针对视频摘要任务创新性地提出了自然语言指导的注意力机制，在视频摘要框架中引入自然语言指导的注意力机制，消融实验表明自然语言指导的注意力机制明显提升了摘要模型性能。此外，本发明提出的自然语言指导的注意力机制具有更强的客观性，能够充分关注和标题文本相关的视频片段，标题文本在互联网视频中容易获得且不需要任何成本。 | ||
| 搜索关键词： | 一种 自然语言 指导 视频 摘要 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于浙江大学，未经浙江大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210652477.2/，转载请声明来源钻瓜专利网。
- 上一篇：一种地衣芽孢杆菌菌株制备工艺
- 下一篇：通过斜面障碍控制行程的负压装置
