[发明专利]基于大数据的智能双录方法、设备、存储介质及装置

权利要求书

1.一种基于大数据的智能双录方法，其特征在于，所述基于大数据的智能双录方法包括以下步骤：

响应于用户输入的录制指令启动录制，获取画面信号与音频信号；

从所述画面信号中截取视频画面，并对所述视频画面中的人员进行身份识别；

对所述音频信号进行实时语音识别，获得语音识别结果，所述语音识别结果包含语音识别文本及对应的音频起止点时间；

根据所述音频起止点时间将所述画面信号、所述音频信号与所述语音识别文本进行合成，获得双录视频。

2.如权利要求1所述的基于大数据的智能双录方法，其特征在于，所述从所述画面信号中截取视频画面，并对所述视频画面中的人员进行身份识别，包括：

从所述画面信号中截取视频画面；

对所述视频画面进行人脸定位，根据定位结果进行裁剪，获得人脸图像；

从所述人脸图像中提取当前人脸特征信息，将所述当前人脸特征信息输入至预设人脸模型中；

接收所述预设人脸模型输出的客服身份信息与客户身份信息。

3.如权利要求2所述的基于大数据的智能双录方法，其特征在于，所述根据所述音频起止点时间将所述画面信号、所述音频信号与所述语音识别文本进行合成，获得双录视频之后，所述方法还包括：

对所述双录视频进行质检，判断所述客服身份信息对应的客服人员发言是否符合预设话术。

4.如权利要求2所述的基于大数据的智能双录方法，其特征在于，所述从所述画面信号中截取视频画面之前，所述方法还包括：

采集样本人脸图像以及所述样本人脸图像对应的样本身份信息；

从所述样本人脸图像中提取样本人脸特征信息，并根据所述样本人脸特征信息和所述样本身份信息建立人脸特征信息与身份信息之间的对应关系；

建立基础模型，根据所述对应关系对所述基础模型进行训练，生成预设人脸模型。

5.如权利要求4所述的基于大数据的智能双录方法，其特征在于，所述从所述画面信号中截取视频画面，包括：

从所述画面信号中截取若干视频图像；

根据预设结构相似性算法检测所述视频图像的清晰度，并将清晰度最高的视频图像作为视频画面。

6.如权利要求1-5中任一项所述的基于大数据的智能双录方法，其特征在于，所述对所述音频信号进行实时语音识别，获得语音识别结果之前，所述方法还包括：

对所述音频信号进行降噪处理；

所述对所述音频信号进行实时语音识别，获得语音识别结果，所述语音识别结果包含语音识别文本及对应的音频起止点时间，包括：

对降噪处理后的音频信号进行实时语音识别，获得包含语音识别文本及所述语音识别文本对应的音频起止点时间的语音识别结果。

7.如权利要求6所述的基于大数据的智能双录方法，其特征在于，所述对降噪处理后的音频信号进行实时语音识别，获得包含语音识别文本及所述语音识别文本对应的音频起止点时间的语音识别结果，包括：

获取降噪处理后的音频信号的音频起止点时间，并从降噪处理后的音频信号中提取当前音频特征信息；

根据预设声学模型对所述当前音频特征信息进行识别，获得当前音节特征信息；

根据预设语言模型对所述当前音节特征信息进行识别，获得语音识别文本，将所述音频起止点时间和所述语音识别文本作为语音识别结果。

8.一种用户设备，其特征在于，所述用户设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于大数据的智能双录程序，所述基于大数据的智能双录程序被所述处理器执行时实现如权利要求1至7中任一项所述的基于大数据的智能双录方法的步骤。

9.一种存储介质，其特征在于，所述存储介质上存储有基于大数据的智能双录程序，所述基于大数据的智能双录程序被处理器执行时实现如权利要求1至7中任一项所述的基于大数据的智能双录方法的步骤。

10.一种基于大数据的智能双录装置，其特征在于，所述基于大数据的智能双录装置包括：

录制模块，用于响应于用户输入的录制指令启动录制，获取画面信号与音频信号；

身份识别模块，用于从所述画面信号中截取视频画面，并对所述视频画面中的人员进行身份识别；

语音识别模块，用于对所述音频信号进行实时语音识别，获得语音识别结果，所述语音识别结果包含语音识别文本及对应的音频起止点时间；

合成模块，用于根据所述音频起止点时间将所述画面信号、所述音频信号与所述语音识别文本进行合成，获得双录视频。