[发明专利]情绪状态确定方法及装置

说明书

本发明提供了一种情绪状态确定方法及装置，涉及数据处理技术领域，所述方法包括：获取视频采集模块发送的视频流，在视频流中提取图像特征和语音特征，根据图像特征确定场景特征信息和用户特征信息，且根据语音特征确定用户的文字特征信息和声纹特征信息，将场景特征信息、用户特征信息、文字特征信息和声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息；将多个情绪状态特征信息进行融合加权处理，得到用户的情绪状态。本发明的一种情绪状态确定方法及装置，通过解析视频可快速识别用户的情绪状态，节省时间，提高识别效率。

技术领域

本发明涉及数据处理技术领域，尤其是涉及一种情绪状态确定方法及装置。

背景技术

情绪作为人反映客观世界的一种形式，对人的现实生活和精神生活都有重要作用。情绪可以影响和调节人们的知觉、记忆、思维、兴趣、动机和意志，并对人的行为及其活动效率产生重要影响。近年来，随着生活节奏的加快，越来越多的人们承受着工作、学习和生活等方面的巨大压力，情绪变化容易反复无常，常常难以自控。

现有技术中，确定人们的情绪状态一般采用问卷测试等方式，过程比较缓慢，耗时耗力，效率较低。

发明内容

有鉴于此，本发明的目的在于提供一种情绪状态确定方法及装置，以缓解了现有技术中确定人们的情绪状态一般采用问卷测试等方式，过程比较缓慢，耗时耗力，效率较低等技术问题。

第一方面，本发明实施例提供了一种情绪状态确定方法，包括：

获取视频采集模块发送的视频流；

在所述视频流中提取图像特征和语音特征；

根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，以及根据所述语音特征确定用户的文字特征信息和声纹特征信息；

将所述场景特征信息、所述用户特征信息、所述文字特征信息和所述声纹特征信息导入到预设情绪分析模型中，得到用户的多个情绪状态特征信息；

将所述多个情绪状态特征信息进行融合加权处理，得到用户的情绪状态。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，所述用户特征信息包括：人体体征、表情特征、行为特征和轨迹特征，根据所述图像特征确定用户所处环境的场景特征信息和用户特征信息，包括：

根据所述视频流的图像帧的时空参数确定所述场景特征信息，所述场景特征信息包括：时间和地点；

当所述视频流的图像帧中包含的人脸数量为一张或者多张时，在所述图像帧中提取与预设用户脸部特征信息相匹配的人脸图像；

在所述视频流的图像帧中确定包含用户人体的区域，得到人体图像；

在所述人体图像的人脸区域提取所述表情特征；

在所述人体图像的身体区域提取所述人体体征、行为特征和轨迹特征。

结合第一方面，本发明实施例提供了第一方面的第二种可能的实施方式，其中，根据所述语音特征确定用户的文字特征信息和声纹特征信息，包括：

提取所述视频流中用户的语音数据；

对所述语音数据进行转化处理，得到所述文字特征信息，所述文字特征信息包括：语义和语法；

对所述语音数据进行声纹处理，得到所述声纹特征信息，所述声纹特征信息包括：语速、基音、音调和停顿。

结合第一方面，本发明实施例提供了第一方面的第三种可能的实施方式，其中，所述场景特征信息还包括：个人属性，所述方法还包括：

接收用户输入的个人属性，所述个人属性包括：性别、年龄、地域和职业。