[发明专利]语音与图像同步性的衡量方法及装置

摘要

本申请提供一种语音与图像同步性的衡量方法及装置，该方法包括：获取视频中的语音片段和图像片段，语音片段与图像片段在视频中具有对应关系；将语音片段转换为特定信号，特定信号与语音片段中说话人的个体特征无关；通过语音神经网络获得特定信号的语音特征；通过视觉神经网络获得图像片段的视觉特征；根据语音特征与视觉特征，确定语音片段与图像片段是否具有同步性。在将语音片段输入语音神经网络之前，通过先对语音片段进行处理，去除语音片段中与人物个体相关的特征，再将对语音片段处理后得到的语音数据输入语音神经网络。这样，通过语音神经网络获取的语音特征就不再携带有说话人自身的特征，进而能够提高语音与图像同步性衡量的准确性。