[发明专利]音频的屏幕相对呈现和用于这样的呈现的音频的编码和解码

说明书

在一些实施例中，用于生成包括指示用于至少一个音频对象的至少一个扭曲程度参数的屏幕相关的元数据的基于对象的音频节目、或者包括通过对基于对象的音频节目的音频内容扭曲到至少部分地由至少一个扭曲程度参数所确定的程度来生成基于扬声器声道的节目的方法，或者用于解码或呈现任何这样的音频节目的方法。其它方面是被配置为执行这样的音频信号生成、解码或者呈现的系统和包括存储任何这样的音频节目的至少一个分段的缓冲存储器的音频处理单元(例如解码器或者编码器)。

相关申请的交叉引用

本申请要求2013年11月14日提交的美国临时专利申请号61/904,233的优先权益，其通过整体引用而并入本文。

技术领域

本发明涉及具有对应的视频内容的音频节目(例如电影或者其它视听节目的声轨)的编码、解码以及呈现。在一些实施例中，该节目是基于对象的音频节目，该基于对象的音频节目包括至少一个音频对象声道、屏幕相关的元数据以及通常还包括扬声器声道。屏幕相关的元数据支持屏幕相对呈现，在屏幕相对呈现中，由节目指示的声源(例如，由对象声道指示的对象)在相对于回放系统的显示屏幕的(至少部分地由屏幕相关的元数据确定的)位置处呈现。

背景技术

本发明的实施例涉及音频内容创建和分发管道(pipeline)(例如，用于创建和分发视听节目的音频内容的管道)的一个或多个方面。

这样的管道实现音频节目(通常是指示音频内容和与音频内容对应的元数据的经编码的音频节目)的生成。音频节目的生成可以包括音频制作活动(音频的捕获和记录)以及可选地还包括“后制作”活动(记录音频的操纵)。现场直播必然需要所有创作决定在音频制作期间做出。在电影和其它非实时节目的生成中，许多创作决定可以在后制作期间做出。

音频内容创建和分发管道可选地实现节目的再混合和/或再灌制(remaster)。在一些情况下，节目在内容创建之后可能需要附加处理以使内容重新用于替代的使用情况。例如，针对在电影院中回放而最初创建的节目可以被修改(例如再混合)以更适合于在家庭环境中回放。

音频内容创建和分发管道通常包括编码阶段。音频节目可能需要编码以使得能够进行分发。例如，预期用于在家庭中回放的节目通常将是被压缩以允许更高效的分发的数据。编码处理可以包括以下步骤：降低空间音频场景的复杂度、和/或节目的单个音频流的数据率降低、和/或将音频内容(例如压缩的音频内容)的多个声道和对应的元数据打包为具有期望的格式的比特流。

音频内容创建和分发管道包括解码和呈现级(通常由包括解码器的回放系统来实现)。最终节目通过基于回放设备和环境将音频描述呈现为喇叭信号来展现给终端消费者。

本发明的典型实施例允许音频节目(例如电影或者具有音频和图像内容的其它节目的声轨)再生使得听觉图像的位置以与对应的视觉图像的位置一致的方式可靠地展现。