[发明专利]用于对三自由度和体积兼容视频流进行编码和解码的方法、设备

权利要求书

1.一种生成表示3D场景的流的方法，所述方法包括：

—根据第一投影映射，通过将从视点可视的3D场景的点投影到第一颜色图上来生成第一颜色数据，所述第一颜色数据是适用于能够围绕所述视点的旋转的3自由度的渲染的颜色图像；

—根据第二投影映射，通过将从所述视点可视的3D场景的点投影到第一深度图上来生成第一深度数据；所述第一深度数据被编码为打包在与第一面片数据项列表相关联的第一深度面片图集中的面片图片，第一面片数据项包括将深度面片图片与所述颜色图像的像素区域进行映射的信息；

—生成表示从所述视点不可视的3D场景的点的第二颜色数据和第二深度数据；以及

—在所述流中，以第一语法元素对所述第一颜色数据进行编码，并且至少以第二语法元素对所述第一深度数据、所述第二颜色数据和所述第二深度数据进行编码。

2.一种用于将表示3D场景的数据编码成流的设备，所述设备包括与至少一个处理器相关联的存储器，所述处理器被配置为：

—根据第一投影映射，通过将从视点可视的3D场景的点投影到第一颜色图上来生成第一颜色数据，所述第一颜色数据是兼容于能够围绕所述视点的旋转的3自由度的渲染的颜色图像；

—根据所述第二投影映射，通过将从所述视点可视的3D场景的点投影到第一深度图上来生成第一深度数据；所述第一深度数据被编码为打包在与第一面片数据项列表相关联的第一深度面片图集中的面片图片，第一面片数据项包括将深度面片图片与所述颜色图像中的像素区域进行映射的信息；

—生成表示从所述视点不可视的3D场景的点的第二颜色数据和第二深度数据；以及

—在所述流中，以第一语法元素对所述第一颜色数据进行编码，并且至少以第二语法元素对所述第一深度数据、所述第二颜色数据和所述第二深度数据进行编码。

3.根据权利要求1所述的方法或权利要求2所述的设备，其中，所述3D场景是以多视图加深度MVD帧的形式获得的，并且其中，通过移除与从所述视点可视的3D场景的点相关联的MVD帧的视图的像素来执行生成第二颜色数据和第二深度数据。

4.根据权利要求1所述的方法或权利要求2所述的设备，其中，通过根据第三投影映射将所述3D场景的剩余点投影到第二颜色图和第二深度图上来执行生成第二颜色数据和第二深度数据，所述剩余点是从所述视点不可视的3D场景的点。

5.根据权利要求4所述的方法或权利要求4所述的设备，其中所述第二颜色数据被编码为打包在颜色面片图集中的面片图片，并且其中所述第二深度数据被编码为第二深度面片图集中的面片图片，并且与第二面片数据项列表相关联，第二面片数据项包括将深度面片图片与所述第二面片图集的颜色面片进行映射的信息。

6.一种对3D场景进行解码的方法，所述方法包括：

—获得流，所述流包括:

·第一语法元素，其承载表示3D场景的第一颜色数据，所述第一颜色数据是通过根据第一投影映射投影从视点可视的3D场景的点编码的颜色图像，所述颜色图像兼容于能够围绕所述视点的旋转的3自由度的渲染，以及

·至少第二语法元素，其承载通过根据所述第一投影映射从所述视点投影3D场景的所述点编码的第一深度数据以及表示从所述视点不可视的3D场景的点的第二颜色数据和第二深度数据；其中所述第一深度数据被编码为打包在与第一面片数据项列表相关联的第一深度面片图集中的面片图片，第一面片数据项包括将深度面片图片与所述颜色图像中的像素区域进行映射的信息；以及

—从所述第一颜色数据对所述颜色图像进行解码。

7.根据权利要求6所述的方法，包括：

—从所述流的至少第二语法元素对第一深度数据进行解码，深度数据表示从所述视点可视的3D场景的点的深度；

—从所述流的至少第二语法元素对第二颜色数据和第二深度数据进行解码。