[发明专利]一种情绪识别方法、装置、设备及介质

说明书

本申请涉及一种情绪识别方法、装置、设备及介质，本申请通过获取目标对象的目标脸部图像，利用特征提取模型对目标脸部图像进行特征提取，得到图像特征向量，将图像特征向量输入关键点检测模型，得到人脸部位上与情绪关联的人脸关键点的人脸关键点信息，利用情绪识别模型对图像特征向量和人脸关键点信息进行情绪识别处理，得到目标对象的情绪类别信息，将图像特征向量和与情绪相关联的人脸关键点信息共同作为情绪识别模型的输入，大大提高了情绪类别结果的准确性，提高情绪识别模型识别处理的效率。

技术领域

本发明涉及数据处理领域，尤其涉及一种情绪识别方法、装置、设备及介质。

背景技术

随着科技的不断发展，情绪识别的应用越来越广泛，例如可以被用于制成测谎仪、应用于心理诊所、反恐预警、疲劳驾驶提醒等。现有的情绪识别技术，需要大量的有标注的图像数据进行模型训练，其模型精度依赖训练数据的数量和质量。但是人类的情绪是一种较为复杂的任务，比如对于开心，每个人的面部特征有相似的表达但具体又是有差异的，而想要遍历所有的样本空间是极其困难的，所以会影响学习的模型精度，或者训练出的模型进行情绪识别时，结果不够准确。

发明内容

为了解决上述技术问题，本发明提供一种情绪识别方法、装置、设备及介质，可以大大提高情绪识别结果的准确性。

根据本公开实施例的第一方面，提供一种情绪识别方法，该方法包括：

获取目标对象的目标脸部图像；

利用特征提取模型对所述目标脸部图像进行特征提取，得到图像特征向量；

将所述图像特征向量输入关键点检测模型，得到人脸关键点信息；其中，所述人脸关键点表征人脸部位上与情绪关联的关键点；

利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息。

在一种可能的实现方式中，所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息之前，所述方法还包括：

根据所述人脸关键点信息，得到目标情绪参考信息；

所述利用情绪识别模型对所述图像特征向量和所述人脸关键点信息进行情绪识别处理，得到所述目标对象的情绪类别信息包括：

将所述图像特征向量和所述人脸关键点信息进行拼接，得到目标特征向量；

利用所述情绪识别模型对所述目标特征向量进行情绪识别处理，得到所述目标对象的情绪类别信息。

在一种可能的实现方式中，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点和第二关键点位于目标人脸部位；

所述根据所述人脸关键点信息，得到目标情绪参考信息包括：

根据所述第一关键点信息和所述第二关键点信息，得到所述目标人脸部位的情绪参考信息，并将所述目标人脸部位的情绪参考信息作为所述目标情绪参考信息。

在一种可能的实现方式中，所述人脸关键点信息包括第一关键点信息和第二关键点信息，其中，第一关键点位于第一目标人脸部位，第二关键点位于第二目标人脸部位；

所述根据所述人脸关键点信息，得到目标情绪参考信息包括：

根据所述第一关键点信息和所述第一目标人脸部位对应的第一权重，得到第一目标人脸部位的情绪参考信息；

根据所述第二关键点信息和所述第二目标人脸部位对应的第二权重，得到第二目标人脸部位的情绪参考信息；

对所述第一目标人脸部位的情绪参考信息和所述第二目标部位的情绪参考信息进行整合处理，得到所述目标情绪参考信息。