[发明专利]使用叠加进行混合现实编码

说明书

本申请公开了使用叠加进行混合现实编码。一种系统包括用于采集真实世界内容的相机以及半导体封装设备。该半导体封装设备包括衬底和逻辑。该逻辑包括：图形流水线，用于生成经经渲染的内容；基础层编码器和第一层编码器，该基础层编码器用于将真实世界内容编码成基础层，并且该第一层编码器用于将经经渲染的内容编码成第一非基础层；多路复用器，用于使基础层与第一非基础层交织以获得具有混合现实内容的单个输出信号；以及发射机，用于发射单个输出信号。该系统进一步包括：第二层编码器，用于将映射数据编码成第二非基础层。多路复用器用于使第二非基础层与第一非基础层和基础层交织。第一层编码器和第二层编码器将经经渲染的内容和所述映射数据编码成叠加辅助图片。

技术领域

实施例总体上涉及视频编码，并且更具体地，涉及使用叠加进行混合现实编码。

背景技术

当今，在进行编码之前，视频内容和经经渲染的内容在前端被合成在一起。一旦被编码，则关于将显示的内容的灵活性就非常小。被发送至显示器的任何内容都会被显示。

附图说明

实施例的各种优点将通过阅读以下说明和所附权利要求以及通过参考以下附图而变得为本领域技术人员所显而易见，在附图中：

图1是展示计算机系统的框图，所述计算机系统被配置成实现本文描述的实施例的一个或多个方面；

图2A到图2D展示了根据实施例的并行处理器部件；

图3A到图3B是根据实施例的图形多处理器的框图；

图4A到图4F展示了示例性架构，其中多个GPU通信地耦合至多个多核处理器；

图5展示根据实施例的图形处理流水线；

图6展示了用于对真实世界内容与经经渲染的内容进行编码的常规框图；

图7展示了根据实施例的用于使用叠加辅助图片对混合现实内容进行编码的设备的示例的框图；

图8展示了根据实施例的使用叠加辅助图片对混合现实内容进行编码的方法的示例的流程图；

图9展示了根据实施例的用于使用叠加辅助图片对混合现实内容进行解码的设备的示例的框图；

图10展示了根据实施例的使用叠加辅助图片对混合现实内容进行解码的方法的示例的流程图；

图11是根据实施例的具有本地背光能力的显示器的示例的框图；

图12A是根据实施例的数据处理装置的示例的框图；

图12B是根据实施例的距离确定的示例的展示；

图13是根据实施例的分层显示架构的示例的框图；

图14是根据实施例的显示架构的示例的框图，所述显示架构包括多个显示单元；

图15是根据实施例的云辅助的媒体递送架构的示例的框图；

图16到图18是根据实施例的数据处理系统的概述的示例的框图；

图19是根据实施例的图形处理引擎的示例的框图；

图20到图22是根据实施例的执行单元的示例的框图；

图23是根据实施例的图形流水线的示例的框图；

图24A到图24B是根据实施例的图形流水线的示例的框图；

图25是根据实施例的图形软件架构的示例的框图；

图26是根据实施例的知识产权(IP)核开发系统的示例的框图；以及

图27是根据实施例的片上系统集成电路的示例的框图。

具体实施方式