[发明专利]一种情绪识别方法、装置、设备及介质

权利要求书

1.一种情绪识别方法，其特征在于，所述方法包括：

获取目标对象的目标脸部图像；

利用特征提取模型对所述目标脸部图像进行特征提取，得到图像特征向量；

将所述图像特征向量输入关键点检测模型，得到人脸关键点信息；其中，所述人脸关键点表征人脸部位上与情绪关联的关键点；

利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息。

2.根据权利要求1所述的方法，其特征在于，所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息之前，所述方法还包括：

根据所述人脸关键点信息，得到目标情绪参考信息；

所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息包括：

将所述图像特征向量和所述目标情绪参考信息进行拼接，得到目标特征向量；

利用所述情绪识别模型对所述目标特征向量进行情绪识别处理，得到所述目标对象的情绪类别信息。

3.根据权利要求2所述的方法，其特征在于，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点和第二关键点位于目标人脸部位；

所述根据所述人脸关键点信息，得到目标情绪参考信息包括：

根据所述第一关键点信息和所述第二关键点信息，得到所述目标人脸部位的情绪参考信息，并将所述目标人脸部位的情绪参考信息作为所述目标情绪参考信息。

4.根据权利要求2所述的方法，其特征在于，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点位于第一目标人脸部位，第二关键点位于第二目标人脸部位；

所述根据所述人脸关键点信息，得到目标情绪参考信息包括：

根据所述第一关键点信息和所述第一目标人脸部位对应的第一权重，得到第一目标人脸部位的情绪参考信息；

根据所述第二关键点信息和所述第二目标人脸部位对应的第二权重，得到第二目标人脸部位的情绪参考信息；

对所述第一目标人脸部位的情绪参考信息和所述第二目标部位的情绪参考信息进行整合处理，得到所述目标情绪参考信息。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取多个样本数据以及对应数据标签，所述多个样本数据包括多个样本人脸图像的样本图像特征向量和样本人脸关键点信息；所述数据标签为所述样本人脸图像中对象的情绪类别信息；

将多个所述样本人脸图像的所述样本图像特征向量和所述样本人脸关键点信息输入预设机器学习模型进行类别预测处理，得到所述多个样本人脸图像中对象的情绪类别预测信息；

基于所述情绪类别预测信息和所述对应数据标签，训练所述预设机器学习模型，得到所述情绪识别模型。

6.根据权利要求1所述的方法，其特征在于，所述获取目标对象的目标脸部图像之前，所述方法还包括：

采集所述目标对象在连续时间段内预设数量帧的脸部图像；

从所述预设数量帧的脸部图像中，得到目标脸部图像。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述目标对象的生理信息；

所述利用情绪模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息包括：

利用所述情绪识别模型对所述图像特征向量、所述人脸关键点信息和所述目标对象的生理信息进行情绪识别处理，得到所述目标对象的情绪类别信息。