[发明专利]情绪识别方法、装置、设备及存储介质

说明书

本发明公开了一种情绪识别方法、装置、设备及存储介质，其方法包括：获取视频文件；从所述视频文件中识别具有业务分析价值的业务片段；对所述业务片段对应的图像人物进行人脸检测，得到人脸图像；对所述人脸图像进行表情识别，得到所述人脸图像的表情识别结果；将所述人脸图像的表情识别结果、预先得到的所述人物的抱胸动作识别结果和预先得到的所述人物的点头动作识别结果进行融合，得到融合后的所述人物的情绪结果。本发明提出通过融合表情、点头动作和抱胸动作等多维度信息以判断人物情绪，提高情绪识别满意度分析的准确率。

技术领域

本发明涉及人脸识别技术领域，尤其涉及一种情绪识别方法、装置、设备及存储介质。

背景技术

视觉场景的情绪识别应用越来越广泛，其中包括不同业务场景下的满意度分析评估，通过对用户的面部信息进行信号处理和分析，确定用户当前的情绪状态进而分析用户对当前业务的满意程度。

目前，视觉场景的情绪识别，无法定位业务场景进而无法找到具有业务分析价值的业务片段；同时，现有的情绪识别对于面部表情的分类、图像的清晰度和人脸的角度要求都比较高，无法筛选出有效人脸进行满意度分析评估；此外，仅仅依靠用户的面部表情进行满意度分析评估，判断决策单一，准确率较低。

发明内容

本发明的主要目的在于提供一种情绪识别方法、装置、设备及存储介质，旨在提高情绪识别满意度分析的准确率。

为实现上述目的，本发明实施例提供一种情绪识别方法，所述方法应用于情绪识别装置，所述方法包括以下步骤：

获取视频文件；

从所述视频文件中识别具有业务分析价值的业务片段；

对所述业务片段对应的图像人物进行人脸检测，得到人脸图像；

对所述人脸图像进行表情识别，得到所述人脸图像的表情识别结果；

将所述人脸图像的表情识别结果、预先得到的所述人物的抱胸动作识别结果和预先得到的所述人物的点头动作识别结果进行融合，得到融合后的所述人物的情绪结果。

可选地，所述情绪识别装置包括：业务片段识别模块，所述从所述视频文件中识别具有业务分析价值的业务片段的步骤包括：

从所述视频文件中读取当前帧的图像；

对所述当前帧的图像进行人体检测，得到人物在所述当前帧的图像中的位置信息；

结合所述位置信息，若所述人物的位置稳定且所处面积占所述当前帧的图像1/10以上，则根据人物的服装、所处区域、停留时间中的一种或多种判断人物身份；

统计全天的时间线，若某一时间段存在不同人物身份且所述时间段超过预设的人物停留时长阈值，则将所述时间段作为具有业务分析价值的时间片段；

通过所述业务片段识别模块识别所述具有业务分析价值的时间片段，基于所述时间片段得到具有业务分析价值的业务片段。

可选地，所述情绪识别装置还包括：抱胸动作识别模块，所述对所述业务片段对应的图像人物进行人脸检测，得到人脸图像的步骤之前还包括：

通过所述抱胸动作识别模块，对所述业务片段对应的图像人物进行抱胸动作识别，得到所述人物的抱胸动作识别结果。

可选地，所述情绪识别装置还包括：人脸检测模块，所述对所述业务片段对应的图像人物进行人脸检测，得到人脸图像的步骤包括：

通过所述人脸检测模块，对所述业务片段对应的图像人物进行人脸检测，得到人脸图像；

基于所述人脸图像获取人脸位置信息，所述人脸位置信息包括检测框的左上角坐标、检测框的右下角坐标和预设数量个人脸关键点坐标。