[发明专利]一种将音视频数据转化成文字记录的系统和方法

权利要求书

1.一种将音视频数据转化成文字记录的系统，其特征在于，包括数据收集部分、数据识别部分以及数据组织部分；

所述数据收集部分包括音频采集模块和视频采集模块；

所述音频采集模块用于捕获当前说话者的音频数据；根据所述音频采集模块捕获的当前说话者的音频数据的强度大小，获取并记录其说话的开始时间；

所述视频采集模块用于捕获当前说话者的图像；根据所述视频采集模捕获的当前说话者的图像，获取并记录其说话的开始时间；所述音频采集模块和所述视频采集模块采用相同的标准时间；

所述数据识别部分包括语音和声纹识别模块以及人脸和表情识别模块；

所述语音和声纹识别模块对所述音频采集模块捕获的音频数据进行处理，将其转化成文本格式的文字信息，并对所述音频采集模块捕获的音频数据进行处理，用以识别当前说话者，并对每个说话者赋予一个身份标签；

所述人脸和表情识别模块利用表情识别技术对所述视频采集模块捕获的图像进行处理，识别当前说话者的表情，获得该说话者的情绪，并对所述视频采集模块捕获的图像进行处理，用以识别当前说话者，并对每个说话者赋予一个身份标签；

所述数据组织部分根据所述文字信息、所述音频采集模块记录的当前说话者的说话的开始时间、所述视频采集模块记录的当前说话者的说话的开始时间、所述语音和声纹识别模块对当前说话者赋予的身份标签、所述人脸和表情识别模块对当前说话者赋予的身份标签以及当前说话者的情绪，生成文字记录；

其中，根据所述音频采集模块记录的当前说话者的说话的开始时间和所述视频采集模块记录的当前说话者的说话的开始时间，将所述语音和声纹识别模块对当前说话者赋予的身份标签与所述人脸和表情识别模块对当前说话者赋予的身份标签进行统一。

2.根据权利要求1所述的系统，其特征在于，所述文字记录为对话形式的文字记录。

3.根据权利要求1或2所述的系统，其特征在于，所述系统还包括数据补充和修正部分，所述数据补充和修正部分用于对所述文字记录进行补充和修正。

4.根据权利要求1或2所述的系统，其特征在于，所述语音和声纹识别模块对所述音频采集模块捕获的音频数据进行处理，还附加地利用所述捕获的当前说话者的音频数据的音频采集模块的设备标识符，识别当前说话者；

所述人脸和表情识别模块对所述视频采集模块捕获的图像进行处理，还附加地利用所述捕获的当前说话者的图像的视频采集模块的设备标识符，识别当前说话者。

5.根据权利要求1或2所述的系统，其特征在于，所述系统还包括存储模块，所述存储模块存储有记录包含说话者的身份标签、声纹特征数据和脸部特征数据的数据表。