[发明专利]音频数据可视化方法及装置

说明书

本发明适用于信号处理技术领域，提供了一种音频数据可视化方法及装置，所述方法包括：接收音频数据并提取所述音频数据的声学特征；通过情感分类模型得出所述音频数据的与所述声学特征时序上对应的情感特征；通过模式特征生成模型生成所述音频数据的与所述情感特征时序上对应的模式特征；通过预设数据库获取与所述模式特征对应的预设可视化信息并展示，所述预设数据库中存储有多对一一对应的模式特征和预设可视化信息。上述方法可根据任意音频数据生成对应的模式特征并予以显示，而且相对于现有技术，音频数据与可视化信息之间具有更好的一致性和匹配度。

技术领域

本发明属于信号处理技术领域，尤其涉及一种音频数据可视化方法及装置。

背景技术

现有的部分音乐软件带有可视化功能，例如形状、图形、颜色等的变换。而这些变换都是根据能量简单地生成的，并不具有情感表达能力和娱乐性。类似的可视化地表达音乐情感的方法是根据音乐段落寻找相匹配的视频，或使用直接的音乐声学特征与视频特征的匹配。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：现有技术采用视频的搜索与匹配技术，即根据给定的音乐段落，在特定的视频数据库里找寻在时序上最匹配的视频。然而对于任意音乐段落，不一定能找出与之在时序上足够匹配的视频。同时，针对不同的特定模式，例如舞蹈、音乐喷泉、烟火等，视频寻找的方法更是没法满足匹配的一致性。

发明内容

有鉴于此，本发明实施例提供了一种音频数据可视化方法及装置，以解决现有技术中对于任一音频数据不能搜索出在时序上足够匹配的视频的问题。

本发明实施例的第一方面，提供了一种音频数据可视化方法，包括：

接收音频数据并提取所述音频数据的声学特征；

通过情感分类模型得出所述音频数据的与所述声学特征时序上对应的情感特征；

通过模式特征生成模型生成所述音频数据的与所述情感特征时序上对应的模式特征；

通过预设数据库获取与所述模式特征对应的预设可视化信息并展示，所述预设数据库中存储有多对一一对应的模式特征和预设可视化信息。

本发明实施例的第二方面，提供了一种音频数据可视化装置，包括：

声学特征提取模块，用于接收音频数据并提取所述音频数据的声学特征；

情感特征获取模块，用于通过情感分类模型得出与所述声学特征时序上对应的情感特征；

模式生成模块，用于通过模式特征生成模型生成与所述情感特征时序上对应的模式特征；

可视化模块，用于通过预设数据库获取与所述模式特征对应的预设可视化信息并展示；所述预设数据库中存储有多对一一对应的模式特征和预设可视化信息。

本发明实施例相对于现有技术所具有的有益效果：提取所述音频数据的声学特征，通过情感分类模型得出所述音频数据的与所述声学特征时序上对应的情感特征，通过模式特征生成模型生成所述音频数据的与所述情感特征时序上对应的模式特征，通过预设数据库获取与所述模式特征对应的预设可视化信息并展示，只需预先定义模式特征的组合，即可根据任意音频数据生成对应的模式特征并予以显示，而且声学特征、情感特征和模式特征之间在时序上相对应，因此相对于现有技术，音频数据与可视化信息之间具有更好的一致性和匹配度。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的音频数据可视化方法的流程图；