[发明专利]一种基于光流和RGB模态对比学习的微表情识别方法及系统有效
| 申请号: | 202110464746.8 | 申请日: | 2021-04-28 |
| 公开(公告)号: | CN113139479B | 公开(公告)日: | 2022-07-29 |
| 发明(设计)人: | 贲晛烨;宋延新;李玉军;黄天欢;孙国荃;孙浩 | 申请(专利权)人: | 山东大学 |
| 主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/44;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 济南金迪知识产权代理有限公司 37219 | 代理人: | 杨树云 |
| 地址: | 250199 山*** | 国省代码: | 山东;37 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明涉及一种基于光流和RGB模态对比学习的微表情识别方法及系统,包括:A、对微表情视频进行预处理,包括:获取视频帧序列、人脸检测与定位、人脸对齐以及提取光流序列特征和RGB序列特征;B、对微表情数据集提取光流序列特征和RGB序列特征,将其划分为测试集和训练集;C、构建双模态对比学习识别模型,包括三维卷积残差网络,三维卷积残差网络分别对光流序列特征和RGB序列特征进行特征编码;D、构建交叉熵损失和对比学习损失,利用损失函数训练双模态对比学习识别模型;E、分类识别,根据训练好的双模态对比学习识别模型,对测试集进行分类识别。本发明利用监督信息和无监督信息对网络同时约束,以此得到更强的特征表达。 | ||
| 搜索关键词: | 一种 基于 rgb 对比 学习 表情 识别 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东大学,未经山东大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110464746.8/,转载请声明来源钻瓜专利网。





