[发明专利]人脸情绪识别方法、装置、计算机设备及存储介质在审
| 申请号: | 201811183763.9 | 申请日: | 2018-10-11 | 
| 公开(公告)号: | CN109508638A | 公开(公告)日: | 2019-03-22 | 
| 发明(设计)人: | 董洪涛 | 申请(专利权)人: | 平安科技(深圳)有限公司 | 
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 | 
| 代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 谭果林 | 
| 地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 情绪识别 检测 人脸 视频数据 目标人脸图像 计算机设备 存储介质 人脸视频 人脸图像 递归神经网络 卷积神经网络 人脸检测算法 对视频数据 单帧画面 模型训练 情绪信息 视频截取 信息不足 正整数 视频 保证 | ||
1.一种人脸情绪识别方法,其特征在于,包括:
获取待检测视频数据,从所述待检测视频数据中提取至少一幅待检测人脸图像;
采用人脸检测算法对所述待检测人脸图像进行检测,得到所述待检测视频数据的N个目标人脸图像区域,其中,N为正整数;
根据N个所述目标人脸图像区域对所述待检测视频数据进行视频截取,得到N个待识别人脸视频数据;
将N个所述待识别人脸视频数据输入到人脸情绪识别模型中进行识别,得到所述待检测视频数据中的N个人脸情绪信息,其中,所述人脸情绪识别模型为采用卷积神经网络-长短时递归神经网络模型训练得到的。
2.如权利要求1所述的人脸情绪识别方法,其特征在于,所述待检测人脸图像为至少两幅;
所述采用人脸检测算法对所述待检测人脸图像进行检测,得到所述待检测视频数据的N个目标人脸图像区域,具体包括如下步骤:
采用人脸检测算法对每一幅所述待检测人脸图像进行检测,得到每一幅所述待检测人脸图像的N个初始人脸图像区域;
采用人脸识别算法对每一幅所述待检测人脸图像的N个初始人脸图像区域进行识别,得到每一所述初始人脸图像区域的用户标识;
将所述待检测人脸图像中相同用户标识对应的初始人脸图像区域进图像区域整合,得到所述待检测视频数据的N个目标人脸图像区域。
3.如权利要求1所述的人脸情绪识别方法,其特征在于,在所述将N个所述待识别人脸视频数据输入到人脸情绪识别模型中进行识别,得到待检测视频中的N个人脸情绪信息的步骤之后,所述人脸情绪识别方法还包括如下步骤:
对所述待检测视频数据中的N个人脸情绪信息进行统计,得到情绪统计信息;
获取预设情绪检测规则,根据所述预设情绪检测规则对所述情绪统计信息进行检验,得到所述待检测视频数据的情绪识别信息。
4.如权利要求1所述的人脸情绪识别方法,其特征在于,在所述将N个所述待识别人脸视频数据输入到人脸情绪识别模型进行检测,得到待检测视频数据中的N个人脸情绪信息的步骤之前,所述人脸情绪识别方法还包括如下步骤:
获取原始视频样本数据,其中,每一所述原始视频样本数据均已进行了样本标注;
对每一所述原始视频样本数据进行视频分帧和人脸检测处理,得到训练人脸图片;
对所述训练人脸图片按照预设数量进行分组,获取目标训练数据,每一所述目标训练数据包括连续M帧的所述训练人脸图片;
将所述目标训练数据输入到卷积神经网络-长短时递归神经网络模型中进行训练,获取人脸情绪识别模型。
5.如权利要求4所述的人脸情绪识别方法,其特征在于,所述将所述目标训练数据输入到卷积神经网络-长短时递归神经网络模型中进行训练,获取人脸情绪识别模型,具体包括如下步骤:
初始化卷积神经网络-长短时递归神经网络模型的模型参数;
采用卷积神经网络对所述目标训练数据进行特征提取,获取人脸特征;
将所述人脸特征输入到长短时递归神经网络模型中进行训练,获取所述人脸情绪识别模型。
6.一种人脸情绪识别装置,其特征在于,包括:
待检测视频数据获取模块,用于获取待检测视频数据,从所述待检测视频数据中提取至少一幅待检测人脸图像;
目标人脸图像区域获取模块,用于采用人脸检测算法对所述待检测人脸图像进行检测,得到所述待检测视频数据的N个目标人脸图像区域,其中,N为正整数;
待识别人脸视频数据截取模块,用于根据N个所述目标人脸图像区域对所述待检测视频数据进行视频截取,得到N个待识别人脸视频数据;
人脸情绪信息获取模块,用于将N个所述待识别人脸视频数据输入到人脸情绪识别模型中进行识别,得到所述待检测视频数据中的N个人脸情绪信息,其中,所述人脸情绪识别模型为采用卷积神经网络-长短时递归神经网络模型训练得到的。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811183763.9/1.html,转载请声明来源钻瓜专利网。





