[发明专利]基于多模态融合机制的视频语义表征方法、系统及介质有效
申请号: | 201811289502.5 | 申请日: | 2018-10-31 |
公开(公告)号: | CN109472232B | 公开(公告)日: | 2020-09-29 |
发明(设计)人: | 侯素娟;车统统;王海帅;郑元杰;王静;贾伟宽;史云峰 | 申请(专利权)人: | 山东师范大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 黄海丽 |
地址: | 250358 山东省*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开公开了基于多模态融合机制的视频语义表征方法、系统及介质,特征提取:提取视频自身的视觉特征、语音特征、运动特征、文本特征和领域特征;特征融合:将提取的视觉、语音、运动、文本特征和领域特征,通过构建的多层次的隐含狄利克雷分布主题模型进行特征融合;特征映射:将融合后的特征映射到一个高层语义空间,得到融合后的特征表示序列。模型利用主题模型在语义分析领域的独特优势,在其基础上提出的模型所训练获得的视频表征方式在语义空间具有较理想的区分性。 | ||
搜索关键词: | 基于 多模态 融合 机制 视频 语义 表征 方法 系统 介质 | ||
【主权项】:
1.基于多模态融合机制的视频语义表征方法,其特征是,包括:特征提取:提取视频自身的视觉特征、语音特征、运动特征、文本特征和领域特征;特征融合:将提取的视觉、语音、运动、文本特征和领域特征,通过构建的多层次的隐含狄利克雷分布主题模型进行特征融合;特征映射:将融合后的特征映射到一个高层语义空间,得到融合后的特征表示序列。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东师范大学,未经山东师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811289502.5/,转载请声明来源钻瓜专利网。
- 上一篇:变电站谐波源定位方法及装置、计算机可读存储介质
- 下一篇:一种行为追踪系统