[发明专利]基于音频数据的图像渲染方法、装置及计算机设备

说明书

本申请提供一种基于音频数据的图像渲染方法、装置、计算机设备以及存储介质，本方法通过将音频数据的频谱数据转换为时频谱图，在渲染音频可视化效果图时，在任意虚拟模型定义连续的音频柱绘制区域后，针对音频柱绘制区域生成纹理坐标，通过纹理坐标获取音频柱绘制区域中各个音频柱的频谱数据，以对音频柱对应的绘图区域进行渲染生成音频柱效果图，实现在任意模型表面上，渲染音频数据的可视化动画效果。

技术领域

本申请涉及图像技术领域，具体涉及一种基于音频数据的图像渲染方法、装置、计算机设备以及计算机可读存储介质。

背景技术

在游戏、影视等涉及到计算机图形学的领域，经常通过音频数据的可视化渲染效果来表现音乐的韵律，配合听觉给予用户提供更加深入的氛围体验。音频数据的可视化渲染通常是将音乐数据转换为对应的柱状频谱图，通过柱状频谱图中不同音乐柱的高低起伏跳动表现音乐的律动，但是现有技术中柱状频谱图1般只能通过固定的显示窗口进行显示，难以渲染至任意虚拟模型的模型表面。

发明内容

基于此，有必要针对上述技术问题，提供一种基于音频数据的图像渲染方法、装置及计算机设备，用以将音频数据的可视化效果渲染至任意虚拟模型的模型表面上，提高音频数据的可视化效果渲染的普适性。

第一方面，本申请提供一种基于音频数据的图像渲染方法，该方法包括：

获取音频数据的时频谱图；

确定在虚拟模型上的音频柱绘制区域，并根据所述音频柱绘制区域中各个目标顶点的顶点坐标获取所述音频柱绘制区域的纹理坐标；

对所述音频柱绘制区域进行划分得到多个音频柱对应的绘图区域，并根据所述音频柱绘制区域的纹理坐标在所述时频谱图中获取在不同时序帧下所述音频柱对应的频谱数据；

根据不同时序帧下所述音频柱对应的频谱数据，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图。

第二方面，本申请提供一种基于音频数据的图像渲染装置，该装置包括：

时频谱图获取模块，用于获取音频数据的时频谱图；

绘制区域获取模块，用于确定在虚拟模型上的音频柱绘制区域，并根据所述音频柱绘制区域中各个目标顶点的顶点坐标获取所述音频柱绘制区域的纹理坐标；

频谱数据采样模块，用于对所述音频柱绘制区域进行划分得到多个音频柱对应的绘图区域，并根据所述音频柱绘制区域的纹理坐标在所述时频谱图中获取在不同时序帧下所述音频柱对应的频谱数据；

效果图绘制模块，用于根据不同时序帧下所述音频柱对应的频谱数据，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图。

第三方面，本申请还提供一种计算机设备，该计算机设备包括：

一个或多个处理器；

存储器；以及

一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现基于音频数据的图像渲染方法。

第四方面，本申请还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行所述的基于音频数据的图像渲染方法中的步骤。