[发明专利]用于流传输和渲染的球形视频的转换和预处理

权利要求书

1.一种用于处理球形内容的方法，所述方法包括：

由计算设备接收视频的球形内容；

由计算设备从球形内容生成用来表示视频中的图像的多个面图像；

由计算设备生成用于所述多个面图像的二维片材，其中一个或多个面图像基于在物体结构上与所述一个或多个面图像相关联的位置而彼此挨着定位；

由计算设备减小所述多个面图像的尺寸；

由计算设备在片材上的所述多个面图像中的每一个面图像周围添加像素帧，该像素帧包括来自物体结构上的相邻面图像的像素；

由计算设备在片材上挨着所述多个面图像的边缘添加多个间隙；

由计算设备在所述多个间隙中添加间隙内容，其中间隙内容基于邻近所述多个间隙的区域中的内容；

由计算设备对片材上的所述多个面图像、像素帧和间隙内容进行编码；以及

由计算设备将经编码的片材发送到解码器，其中使用像素帧和间隙内容对所述多个面图像进行解码以放置在物体结构上，以显示球形内容。

2.如权利要求1所述的方法，其中：

所述多个面图像包括六个面图像，以及

物体结构包括具有六个侧面的立方体结构。

3.如权利要求1所述的方法，其中物体结构显示在与观看视频的用户相关联的点周围的球形内容。

4.如权利要求1所述的方法，其中通过执行以下操作将所述多个面图像定位在片材上：

选择被指定有优先级的一组面图像；以及

将具有自然边界的该组面图像挨着彼此定位在片材上。

5.如权利要求4所述的方法，其中该组面图像包括前面图像、左面图像、右面图像和顶面图像。

6.如权利要求1所述的方法，其中：

球形内容采用等距长方圆柱格式，

片材包括二维格式的所述多个面图像，其中二维格式的片材被编码，以及

物体结构以三维格式显示所述多个面图像。

7.如权利要求1所述的方法，其中所述多个间隙中的间隙仅被添加在片材上的面图像的相邻边缘之间。

8.如权利要求1所述的方法，其中在所述多个间隙中添加间隙内容包括：

基于与挨着面图像的间隙中的像素邻近的像素的第二颜色，向间隙中的像素添加第一颜色。

9.如权利要求8所述的方法，其中与间隙中的像素邻近的像素已经从像素帧中的相邻面图像添加到面图像。

10.如权利要求1所述的方法，其中间隙内容被用于对第一面图像执行过滤，以在物体结构上渲染第一面图像。

11.如权利要求1所述的方法，其中不在物体结构上渲染间隙内容。

12.如权利要求1所述的方法，其中：

像素帧围绕所述多个面图像中的每个面图像，以及

每个面图像仅在片材上相邻的所述多个面图像的边缘之间包括间隙。

13.如权利要求1所述的方法，其中：

片材的解码生成一组小型化的面图像，用于过滤面图像，以及

像素帧的尺寸基于所需的该组小型化的面图像的数量，使得至少单个像素帧被包括在该组小型化的面图像中的最小的面图像中。

14.如权利要求1所述的方法，其中：

二维片材包括用于第一只眼睛的第一组面图像和用于第二只眼睛的第二组面图像，

物体结构包括第一物体结构和第二物体结构，以及

第一组面图像被放置在用于第一只眼睛的第一物体结构上，并且第二组图像被放置在用于第二只眼睛的第二物体结构上。

15.如权利要求14所述的方法，其中编码使用跨第一组面图像和第二组面图像的内容来优化编码。