[发明专利]一种基于MIT和FSM的多模态情感分析方法有效
申请号: | 202111128257.1 | 申请日: | 2021-09-26 |
公开(公告)号: | CN113806609B | 公开(公告)日: | 2022-07-12 |
发明(设计)人: | 李祖贺;郭青冰;王艳军;马江涛;王凤琴;张秋闻;黄伟;钱晓亮;张焕龙 | 申请(专利权)人: | 郑州轻工业大学 |
主分类号: | G06F16/906 | 分类号: | G06F16/906;G06K9/62;G06N3/04;G06N3/08;G06F16/33;G06F16/35;G06F16/65;G06F16/68;G06F16/75;G06F16/783 |
代理公司: | 郑州优盾知识产权代理有限公司 41125 | 代理人: | 张真真 |
地址: | 450000 河南省郑州*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出了一种基于MIT和FSM的多模态情感分析方法,用以解决现有多模态情感分析方法在融合多模态信息时的技术性问题;其步骤为:首先,分别对文本模态数据、语音模态数据和视频模态数据进行预处理,提取文本特征向量、语音特征向量和视频特征向量;其次,将三个特征向量依次进行组合后分别输入Multimodal Interactive Transformer中进行辅助学习,分别得到三个学习后的特征矩阵;最后,将三个学习后的特征矩阵输入Feature Soft Mapping中映射到统一的语义空间中进行融合,得到融合特征;并将融合特征输入分类层,获取情感预测结果。本发明所提出的多模态情感分析模型能够充分考虑多种模态信息之间的关联,有助于在数据融合后进行情感分类。 | ||
搜索关键词: | 一种 基于 mit fsm 多模态 情感 分析 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州轻工业大学,未经郑州轻工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111128257.1/,转载请声明来源钻瓜专利网。
- 一种支持分布式管理信息树的网络管理方法
- 突变金属 -绝缘体转变装置、使用该突变金属 -绝缘体转变装置的高压噪声消除电路、和包含该电路的电气和/或电子系统
- 使用突变式金属 -绝缘体转变装置的可编程金属 -绝缘体转变传感器、以及包括该金属 -绝缘体转变传感器的报警装置和蓄电池防爆电路
- 连续测量金属-绝缘体转变元件的突变的金属绝缘体转变的电路以及利用此电路的金属-绝缘体转变传感器
- 三端金属-绝缘体转变开关、包括该转变开关的开关系统和控制该转变开关的金属-绝缘体转变的方法
- 小鼠短串联重复序列的复合扩增体系及检测试剂盒
- 金属-绝缘体相变触发器
- 包括临界电流供给器件的金属绝缘体转变晶体管系统
- 线粒体基因组检测方法及引物
- 多接口应答器设备