[发明专利]一种音频处理方法及装置、终端设备

说明书

本申请公开一种音频处理方法及装置、终端设备，涉及VR的虚拟音频技术领域，能够使得VR设备提供的VR音频效果与VR应用展示给用户的VR视觉效果的空间感相匹配。该音频处理方法包括：根据原始音频数据中的音频声道信息，利用头相关变换函数HRTF数据库对原始音频数据进行虚拟化处理；从采样混响数据库中选择用户选定的位置对应的采样混响数据，采样混响数据库包含VR应用展示的场景中的位置对应的采样混响数据；利用用户选定的位置对应的采样混响数据，对虚拟化音频数据进行混响卷积处理；对混响卷积处理后的虚拟化音频数据进行混音处理，生成双耳音频数据。本申请用于音频处理。

技术领域

本申请涉及VR(Virtual Reality，虚拟现实)的虚拟音频技术领域，尤其涉及一种音频处理方法。

背景技术

VR是利用计算机图像、声音系统和各种现实及控制等接口设备，在计算机上生成的、可交互的三维环境中提供沉浸感受的技术。当前虚拟现实领域研究非常广泛，其中，VR的虚拟音频方面的体验也越来越被重视。

目前，在使用VR设备时，用户开启的VR应用通常会通过VR设备展示给用户一些模拟真实环境的音视频效果。其中，VR设备所提供的音频效果主要是利用HRTF(Head RelatedTransfer Function，头相关变换函数)技术来实现模拟真实环境音频的效果。但这类处理技术仅仅实现了具有方向感的声音效果，HRTF技术固有的头中效应、声源距离感等方面效果还是存在不足。采用HRTF技术所模拟的真实环境音频往往无法提供很好的临场感和沉浸感。

为了解决以上问题，现有技术中采用FDN(Feedback delay network，反馈延迟网络)方法添加后期混响，使VR设备提供空间感更好的音频效果。但在该技术方案中，主要是利用算法混响来模拟音频的后期混响效果，使所输出的音频信号具有一定的空间感。而算法混响仍然难以模拟VR应用所展示的具体场景对应的空间感，因此该技术方案中依然存在VR设备提供的VR音频效果与真实VR应用展示给用户的VR视觉效果的空间感不匹配的问题，进而无法提供还原特定VR应用展示的场景的音频效果，用户体验差。

发明内容

本申请的实施例提供一种音频处理方法及装置、终端设备，能够使得VR设备提供的VR音频效果与真实VR应用展示给用户的VR视觉效果的空间感相匹配，进而提供还原特定VR应用展示的场景的音频效果，提高用户体验。

为达到上述目的，本申请的实施例采用如下技术方案：

第一方面，本申请实施例提供了一种音频处理方法，包括：获取用户输入的位置选择指令，根据位置选择指令在VR应用展示的场景中确定用户选定的位置；根据用户选定的位置，从采样混响数据库中选择用户选定的位置对应的采样混响数据，采样混响数据库包含VR应用展示的场景中的位置对应的采样混响数据；获取VR应用的原始音频数据，例如：该原始音频数据至少可以为2.0双声道音频数据、5.1声道音频数据和7.1声道音频数据中的一种；利用头相关变换函数HRTF数据库对原始音频数据进行虚拟化处理，得到虚拟化音频数据；利用所述用户选定的位置对应的采样混响数据，对虚拟化音频数据进行混响卷积处理；对混响卷积处理后的虚拟化音频数据进行混音处理，生成双耳音频数据。本申请实施例提供的音频处理方法，能够在使用VR应用时，针对用户所选择的VR应用展示的场景中的位置，利用VR应用展示的场景中的位置从采样混响数据库中选择用户选定的位置对应的采样混响数据，对音频数据进行混响卷积处理。由于采样混响数据库包含VR应用展示的场景中的位置对应的采样混响数据，即采样混响数据库的采样混响数据是与VR应用展示的场景中的位置一一对应的，进而使输出音频能够更加逼真的还原出VR应用所展示场景的空间声学特征，提升输出音频的空间感和音质；同时因为用户所选择的不同位置使用的采样混响不同，用户可以根据自己的需要选择不同位置的音频效果，提升了输出音频的临场感与沉浸感。