[发明专利]信息处理方法及系统

权利要求书

1.一种信息处理方法，其特征在于，所述信息处理方法应用于设置于教室内的终端设备，包括：

接收特征采集器在预设课程时间段内采集的多媒体文件；

筛选所述多媒体文件中满足预设条件的多媒体片段；

识别所述多媒体片段中各个人物对象的身份信息及行为特征；

将各个人物对象的身份信息及行为特征发送至云服务器。

2.根据权利要求1所述的信息处理方法，其特征在于，所述多媒体文件包括音频文件和/或视频文件，所述筛选所述多媒体文件中满足预设条件的多媒体片段，包括：

筛选所述音频文件中包含人物对象语音的多媒体片段；

和/或，筛选所述视频文件中包含人物对象面部的多媒体片段。

3.根据权利要求2所述的信息处理方法，其特征在于，识别所述多媒体片段中各个人物对象的身份信息，包括：

提取所述多媒体片段中人物对象的声纹特征；

当所述声纹特征与预设声纹库中的任一声纹的相似度满足第一预设条件时，将与所述预设声纹库中的声纹对应的身份信息确定为该人物对象的身份信息。

4.根据权利要求2所述的信息处理方法，其特征在于，识别所述多媒体片段中各个人物对象的行为特征，包括：

提取所述多媒体片段中人物对象的人脸图像；

当所述人脸图像与预设人脸库中的任一人脸图像的相似度满足第二预设条件时，将与所述预设人脸库中的人脸图像对应的行为特征确定为该人物对象的行为特征。

5.根据权利要求4所述的信息处理方法，其特征在于，所述行为特征包括文字对话内容，识别所述多媒体片段中各个人物对象的行为特征，包括：

提取所述多媒体片段中人物对象的语音信号；

利用预设特征提取模型、预设声学模型、预设语言模型和预设语音解码器对所述语音信号进行处理，得到文字对话内容。

6.根据权利要求5所述的信息处理方法，其特征在于，所述行为特征包括表情描述内容，识别所述多媒体片段中各个人物对象的行为特征，包括；

检测所述多媒体片段中人物对象的人脸图像；

当所述人脸图像中的人脸表情与预设人脸表情库中的任一人脸表情图像的相似度满足第三预设条件时，将与所述预设人脸表情库中人脸表情图像对应的表情描述内容确定为该人物对象的行为特征。

7.根据权利要求6所述的信息处理方法，其特征在于，所述行为特征包括情绪，识别所述多媒体片段中各个人物对象的行为特征，包括；

提取所述多媒体片段中人物对象的语音信号；

所述语音信号经过预设语调识别器的处理，得到语调文本数据。

8.一种信息处理方法，其特征在于，所述信息处理方法应用于云服务器，包括：

接收至少两个终端设备发送的各个人物对象的身份信息及行为特征；

针对每个人物对象分别构建行为特征集合；

根据各个人物对象的所述行为特征集合生成人物分析报告；

基于所述人物分析报告生成课程评价结果。

9.根据权利要求8所述的信息处理方法，其特征在于，所述方法还包括：

当接收到用户根据所述课程评价结果输入的课程改进方案时，将所述课程改进方案发送给终端设备。

10.一种信息处理系统，其特征在于，包括：云服务器、多个特征采集器和至少一个终端设备；

所述特征采集器，用于在预设课程时间段内采集多媒体文件；

所述终端设备，用于根据所述多媒体文件确定各个人物对象的身份信息及行为特征；

所述云服务器，用于根据各个人物对象的所述身份信息及所述行为特征生成人物分析报告，以及，根据所述人物分析报告生成课程评价结果。