[发明专利]基于视频的在线人脸表情预检测方法及装置

摘要

本发明涉及一种基于视频的在线人脸表情预检测方法及装置，该方法包括：对表情视频预处理，并抽取LBP纹理特征；从原始视频提取长度不同的视频片断，构建片断与检测值的映射关系；基于多示例学习，获取每个视频片断的函数表示，并将每两个视频片断构建一个约束对；根据每个训练样本的约束对，通过最小化所有片断在当前时刻的损失函数和函数参数与上一时刻的差异，采用拉格朗日乘数法对模型进行优化，从而更新模型，获得各个时刻的线性表情预检测函数。对于测试样本，将每帧图像特征依次输入预检测器，实时获取每帧图像的检测值，最终根据输出值是否达到预设的阈值判断是否检测到该表情事件。本发明解决了传统表情识别方法不能实现的实时检测问题，并首次提出了在线预检测模型，提高了识别的正确性和及时性。

主权项

1.一种基于视频的在线人脸表情预检测方法，其特征在于，包括：步骤1)、针对训练样本集，对表情视频预处理，通过面部关键点检测及人脸对齐方法，分割出人脸面部区域，并使整个视频中的脸部图像像素位置一致；步骤2)、提取每个样本视频中每帧图像的面部表情特征；步骤3)、将训练样本进行扩展，提取多个长度不同的视频片断构造约束对，并进行排序，使得信息量越大的片断对应的函数值越大；步骤4)、将每个视频的约束对作为模型当前时刻的训练数据，通过最小化所有片断在当前时刻的损失函数和函数参数与上一时刻的差异，采用拉格朗日乘数法对模型进行优化，从而更新模型，获得各个时刻的线性表情预检测函数；步骤5)、针对测试样本，依次采用步骤1)至步骤2)处理，然后根据预检测函数，逐帧读取数据，输出每帧图像对应的检测值，最终根据预设的阈值实现表情预检测。