[发明专利]一种姿态鲁棒的视频笑脸识别方法

摘要

本发明公开了一种姿态鲁棒的视频笑脸识别方法，包括以下步骤：提取视频图像中的图像帧，通过人脸检测算法对其中的人脸进行检测；对定位到的人脸矩形框执行人脸表情关键点定位算法，对人脸表情特征点进行定位；提取定位到的人脸表情特征点的位置信息；将提取到的人脸表情特征点与在线训练的微笑表情特征点模板参数进行匹配；当后续图像帧读取后，在该微笑状态位置的附近区域进行小范围的微笑表情参数匹配；将当前图像帧的微笑识别结果以连续参数变量进行输出。本发明可对表情细节的变化过程进行精确的跟踪，本方法对光照鲁棒，实现在自然光照下的实时应用，可适应各种人脸视频，在表情识别、人机交互、影视特效等领域具有广泛的应用前景。

主权项

1.一种姿态鲁棒的视频笑脸识别方法，其特征在于，包括以下步骤：S1、通过摄像头实时采集自然场景的视频图像，提取视频图像中的图像帧，通过人脸检测算法对其中的人脸进行检测，如果存在人脸，则通过矩形框对人脸的位置进行标识；S2、对定位到的人脸矩形框执行人脸表情关键点定位算法，对人脸表情特征点进行定位，包括人脸上的眼睛、鼻子、嘴巴及脸颊；S3、提取定位到的人脸表情特征点的位置信息，并对提取到的位置信息进行归一化处理；S4、将提取到的人脸表情特征点与在线训练的微笑表情特征点模板参数进行匹配，如果匹配的结果误差在给定的阈值内，则输出识别的微笑表情；S5、如果当前图像帧中识别出了微笑表情，则将该微笑表情对应的人脸表情特征点参数和位置信息存储为微笑状态位置；当后续图像帧读取后，在该微笑状态位置的附近区域进行小范围的微笑表情参数匹配，实现对后续图像帧的微笑表情参数识别；S6、将当前图像帧的微笑识别结果以连续参数变量进行输出，并以0和1分别表示平静表情和微笑表情，(0，1)区间内的参数分别表示表情的中间过度状态参数。