[发明专利]音乐视频流派分类方法、装置、计算机设备及存储介质

说明书

本发明涉及语音语义和图像检测领域，具体公开了一种音乐视频流派分类方法、装置、计算机设备及存储介质，其方法通过对音乐视频中的视频数据进行视频片段划分，计算视频片段的若干帧间光流并输入预设的时域风格卷积网络，得到与视频片段对应的第一音乐流派分类结果；提取视频片段的关键帧图像，从音乐视频的音频数据中截取与关键帧图像对应的关键音频数据并输入预设的空间风格卷积网络，得到与视频片段对应的第二音乐流派分类结果；根据若干视频片段的第一音乐流派分类结果和第二音乐流派分类结果的加权平均值，确定该音乐视频的音乐流派类别。本发明综合考虑了音乐视频中的音频内容和视频内容对音乐流派的分类影响，分类的精确度高。

技术领域

本发明涉及语音语义和图像检测领域，尤其涉及一种音乐视频流派分类方法、装置、计算机设备及存储介质。

背景技术

随着互联网技术的不断发展，用户可随时随地从互联网获取到海量的音乐视频以满足其在娱乐、工作等方面的需求。而为满足用户的不同偏好或者满足用户的不同工作需求，使用户可以快速检索并获取到其所需的音乐视频，需要对音乐视频进行流派分类。

传统的音乐视频流派分类方法，仅通过提取出音乐视频中有关流派识别的特征音频信息，再根据提取出的特征音频信息对音乐视频进行流派分类，得到音乐视频的流派。即仅考虑到不同音乐流派的特征音频信息的差异这一因素，而并未考虑其他影响因素。

但是，由于不同的音乐流派之间存在交叉部分，且需要综合考虑其他方面的因素才能较好地区分开不同的音乐流派，所以传统的音乐视频流派分类方法仅根据音乐视频的特征音频信息这一因素，进行“一刀切”的分类方式，仍存在分类精确度较差的问题。

发明内容

基于此，有必要针对上述技术问题，提供一种音乐视频流派分类方法、装置、计算机设备及存储介质，以解决现有的音乐视频流派分类方法的分类精确度较差的问题。

一种音乐视频流派分类方法，包括：

获取音乐视频文件，从所述音乐视频文件中提取音频数据和视频数据；将所述视频数据划分成若干视频片段；每个所述视频片段包括若干帧图像；

计算所述视频片段的若干帧间光流，将所述若干帧间光流输入预设的时域风格卷积网络进行处理，得到与所述视频片段对应的第一音乐流派分类结果；

提取所述视频片段的关键帧图像，从所述音频数据中截取与所述关键帧图像对应的关键音频数据，将所述关键音频数据输入预设的空间风格卷积网络进行处理，得到与所述视频片段对应的第二音乐流派分类结果；

计算所述若干视频片段的第一音乐流派分类结果和第二音乐流派分类结果的加权平均值，根据所述加权平均值确定所述音乐视频文件的音乐流派类别。

一种音乐视频流派分类装置，包括：

数据提取模块，用于获取音乐视频文件，从所述音乐视频文件中提取音频数据和视频数据；将所述视频数据划分成若干视频片段；每个所述视频片段包括若干帧图像；

第一音乐流派分类结果获得模块，用于计算所述视频片段的若干帧间光流，将所述若干帧间光流输入预设的时域风格卷积网络进行处理，得到与所述视频片段对应的第一音乐流派分类结果；

第二音乐流派分类结果获得模块，用于提取所述视频片段的关键帧图像，从所述音频数据中截取与所述关键帧图像对应的关键音频数据，将所述关键音频数据输入预设的空间风格卷积网络进行处理，得到与所述视频片段对应的第二音乐流派分类结果；

音乐流派类别确定模块，用于对计算所述若干视频片段的第一音乐流派分类结果和第二音乐流派分类结果的加权平均值，根据所述加权平均值确定所述音乐视频文件的音乐流派类别。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现上述音乐视频流派分类方法。