[发明专利]自适应成流音频对象的系统

说明书

相关申请

本申请要求根据35U.S.C第119条第(e)项享有2009年8月14提交的发明名称为“Production，Transmission，Storage and Rendering System for Multi-Dimensional Audio”的美国临时专利申请No.61/233,931的优先权，在此并入其公开的全部作为参考。

背景技术

诸如立体声和环绕声之类的现有音频分发系统基于非灵活的范例，其中实现了从产生点至回放环境的固定数目的声道。传统上，贯穿整个音频链，在创建的声道的数目与物理上传输或记录的声道数目之间存在一对一的对应关系。在一些情况下，通过被称作混合(mix-down)的过程减少了可用声道的数目以适应回放配置，其中所述回放配置具有比传输流中提供的声道数目要少的再现声道。混合的普通示例是将立体声混入单声道以经由单个扬声器再现，以及将多声道环绕声混入立体声以经由两个扬声器回放。

音频分发系统也不适于3D视频应用，因为其不能够从三维空间中精确地再现声音。这些系统受到扬声器的数目和位置的限制，并且受到以下事实的限制：一般会忽视心理声学原理。结果，即使最精巧的声音系统也只是创建了对声学空间的粗糙仿真，而并没有接近真实的3D或多维呈现。

发明内容

描述了一种用于提供面向对象的音频的系统和方法。在一些实施例中，通过将声源与这些声源的属性(例如位置、速度、方向性等)相关联来创建音频对象。可以除声道以外还使用音频对象，或替代声道来使用音频对象，以例如通过使音频对象成流来经由网络向客户端设备分发声音。对象可以限定空间中与二维坐标和三维坐标相关联的位置。可以基于可用网络资源和客户端设备资源使对象自适应成流传送至客户端设备。客户端设备上的再现器可以使用对象的属性来确定如何再现对象。再现器还基于与客户端设备的再现环境相关的信息来调整对象的回放。还描述了音频对象创建技术的多种示例。

在一些实施例中，一种自适应传输面向对象的音频流的方法可以包括：从远程计算机系统接收针对音频内容的请求；从远程计算机系统接收与该远程计算机系统的可用计算资源相关的资源信息；利用一个或多个处理器以至少部分地基于资源信息及与多个音频对象相对应的优先级信息来可编程地选择与音频内容相关联的所述多个音频对象中的一个或多个音频对象；以及经由网络向远程计算机系统传输选定的所述一个或多个音频对象。

在一些实施例中，一种用于自适应传输面向对象的音频流的系统可以包括：网络资源监视器，可以经由网络从远程计算机系统接收音频内容请求，并且访问关于网络可用资源的网络资源信息。系统还可以包括由一个或多个处理器实现的面向对象编码器，其中所述面向对象的编码器可以至少部分地基于可用网络资源及与多个音频对象相关联的优先级信息来选择所述多个音频对象中的一个或多个音频对象，以从音频流中去除。系统还可以包括音频传输模块，所述音频传输模块可以经由网络向远程计算机系统传输音频流。

在一些实施例中，一种自适应再现面向对象的音频流的方法可以包括：利用计算机系统经由网络从远程服务器接收具有多个音频对象的音频流；访问关于与计算机系统相关联的回放环境的环境信息；利用计算机系统以至少部分地基于环境信息来选择所述多个音频对象中的一个或多个音频对象；再现选定的所述一个或多个音频对象以产生输出音频，以及向一个或多个扬声器提供所述输出音频。

在多种实施例中，一种再现面向对象的音频流的方法可以包括：经由网络从远程服务器接收音频流，其中所述音频流具有对象元数据部分和音频信号部分。方法还可以包括访问所述对象元数据部分以识别音频流中包括的音频对象的一个或多个对象属性，通过至少将所述一个或多个对象属性用作提示来再现所述音频信号部分以产生输出音频，以及向一个或多个扬声器提供所述输出音频。

在一些实施例中，一种用于创建面向对象的音频的系统可以包括：对象创建模块，所述对象创建模块可以接收针对第一声源的第一位置数据和第一音频数据，接收针对第二声源的第二位置数据和第二音频数据，创建包括所述第一音频数据和与所述第一位置数据相对应的第一位置的第一音频对象以及创建具有所述第二音频数据和与所述第二位置数据相对应的第二位置的第二音频对象。系统还可以包括由一个或多个处理器实现的对象链接模块。对象链接模块可以通过所述一个或多个处理器创建所述第一音频对象与所述第二音频对象之间的关联，并且可以将所述第一音频对象与所述第二音频对象之间的关联存储在计算机存储器中。