[发明专利]基于音频数据的图像渲染方法、装置及计算机设备

权利要求书

1.一种基于音频数据的图像渲染方法，其特征在于，所述方法包括：

获取音频数据的时频谱图；

确定在虚拟模型上的音频柱绘制区域，并根据所述音频柱绘制区域中各个目标顶点的顶点坐标获取所述音频柱绘制区域的纹理坐标；

对所述音频柱绘制区域进行划分得到多个音频柱对应的绘图区域，并根据所述音频柱绘制区域的纹理坐标在所述时频谱图中获取在不同时序帧下所述音频柱对应的频谱数据；

根据不同时序帧下所述音频柱对应的频谱数据，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图。

2.根据权利要求1所述的方法，其特征在于，所述确定在虚拟模型上的音频柱绘制区域的步骤，包括：

获取投影包围盒的投影方向、包围盒位置以及包围盒大小；

基于所述投影方向以及所述包围盒位置获取所述虚拟模型上的各个顶点在所述投影包围盒对应投影坐标系下的投影坐标数据；

根据所述包围盒位置、所述包围盒大小以及各所述顶点的投影坐标数据，在各所述顶点中确定在所述投影包围盒内的目标顶点；

基于所述目标顶点确定所述虚拟模型的音频柱绘制区域。

3.根据权利要求2所述的方法，其特征在于，所述根据所述音频柱绘制区域中各个目标顶点的顶点坐标获取所述音频柱绘制区域的纹理坐标的步骤，包括：

基于所述投影方向以及包围盒位置将所述目标顶点的顶点坐标转换为在所述投影包围盒对应投影坐标系下的目标投影坐标数据；

根据所述包围盒大小对所述目标顶点的目标投影坐标数据进行归一化处理，将归一化后的所述目标顶点的目标纹理映射坐标确定为所述音频柱绘制区域的纹理坐标。

4.根据权利要求1所述的方法，其特征在于，所述对所述音频柱绘制区域进行划分得到多个音频柱对应的绘图区域，并根据所述音频柱绘制区域的纹理坐标在所述时频谱图中获取在不同时序帧下所述音频柱对应的频谱数据的步骤，包括：

基于预设的音频柱数量对所述音频柱绘制区域在第一方向上进行划分，得到各个音频柱对应的绘图区域；

根据所述音频柱绘制区域的纹理坐标，获取各所述音频柱对应的绘图子区域在第一方向上的第一纹理坐标值；

根据各所述音频柱对应的绘图子区域在第一纹理坐标值，在所述时频谱图中获取在不同时序帧下各所述音频柱的频谱数据。

5.根据权利要求1或4任意一项所述的方法，其特征在于，所述根据不同时序帧下所述音频柱对应的频谱数据，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图的步骤，包括：

针对不同时序帧中的目标时序帧，根据所述目标时序帧下所述音频柱的频谱数据获取所述音频柱对应高度值；

基于所述音频柱对应高度值，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图。

6.根据权利要求1或4任意一项所述的方法，其特征在于，所述根据不同时序帧下所述音频柱对应的频谱数据，对所述音频柱对应的绘图区域进行渲染，得到所述音频数据对应的音频柱效果图的步骤，还包括：

对所述音频柱对应的绘图区域进行划分，得到所述音频柱上的音频格子对应的格子区域；

针对所述音频柱上的音频格子对应的格子区域，生成所述格子区域对应的格子纹理坐标；

针对不同时序帧中的目标时序帧，根据所述目标时序帧下所述音频柱的频谱数据确定所述音频柱上待渲染的目标音频格子；

基于所述目标音频格子的格子纹理坐标从预设的音频格子贴图中采样，生成所述音频数据对应的音频柱效果图。