[发明专利]一种基于立方体的投影方法

说明书

基于立方体的投影方法包括生成与球体的360度图像内容的基于立方体的投影相关联的不同方形投影面的像素。第一正方形投影面的像素通过利用第一映射函数集合生成。第二正方形投影面的像素通过利用第二映射函数集合生成。不同的方形投影面包括第一正方形投影面和第二正方形投影面。第二映射函数集合与第一映射函数集合不同。

相关引用

本发明主张2018年3月2日提出的第62/637,425号美国临时专利申请，以及2019年2月26日提出的第16/285,215号美国专利申请的优先权，上述申请案以引用的方式并入本文。

技术领域

本发明涉及处理全向视频帧，且更具体而言，涉及基于立方体的投影方法，将不同的映射函数应用于不同方形投影面，不同轴和/或轴的不同位置。

背景技术

具有头戴式显示器(Head-mounted display,简称HMD)的虚拟现实(virtualreality,简称VR)与各种应用相关联。向用户显示宽视野内容的能力可用于提供沉浸式视觉体验。真实世界环境必须在所有方向上捕获，从而产生对应于球体的全向视频。随着摄像机装备和HMD的进步，由于表示这种360度图像内容所需的高比特率，VR内容的传送可能很快成为瓶颈。当全向视频的分辨率为4K或更高时，数据压缩/编码对于降低比特率至关重要。

通常，对应于球体的全向视频被变换为基于投影的帧，其具有由以360度虚拟现实(360VR)投影布局打包的投影面所表示的360度图像内容，然后基于投影的帧被编码成比特流以进行传输。然而，如果球体和投影面之间的映射/投影未被正确设计，则由于采样率不均匀，编码/解码质量可能会降低。

发明内容

本发明的目的之一是提供一种基于立方体的投影方法，其将不同的映射函数应用于不同方形投影面，不同轴和/或轴的不同位置。例如，更均匀的采样率可通过所提出的映射函数实现。

根据本发明的第一方面，公开了一种示例性的基于立方体的投影方法。该示例性基于立方体的投影方法包括：通过转换电路生成与球体的360度图像内容的基于立方体的投影相关联的不同正方形投影面的像素。第一正方形投影面的像素通过利用第一映射函数集合生成。第二正方形投影面的像素通过利用第二映射函数集合生成。不同的方形投影面包括第一正方形投影面和第二正方形投影面。第二映射函数集合与第一映射函数集合不同。

根据本发明的第二方面，公开了一种示例性的基于立方体的投影方法。该示例性基于立方体的投影方法包括：通过转换电路生成与球体的360度图像内容的基于立方体的投影相关联的不同正方形投影面的像素。不同正方形投影面之一的像素通过利用包括分别应用于不同轴的不同映射函数的映射函数集合来生成。

根据本发明的第三方面，公开了一种示例性的基于立方体的投影方法。该示例性基于立方体的投影方法包括：通过转换电路生成与球体的360度图像内容的基于立方体的投影相关联的不同正方形投影面的像素。不同正方形投影面之一的像素通过利用包括应用于相同轴的不同映射函数的映射函数集合生成。不同的映射函数包括第一映射函数和第二映射函数。不同的正方形投影面之一具有根据相同轴上的第一位置和第一映射函数设置的第一像素，并且具有根据相同轴上的第二位置和第二映射函数设置的第二像素，其中第二位置与第一位置不同。

在结合下面附图阅读本发明的推荐实施例的以下详细描述之后，本发明之内容无疑将对本领域技术人员变得显而易见。

附图说明

结合在本说明书中并构成本说明书一部分的附图示出了本发明的实施例，并且与说明书一起用于解释本发明的原理：

图1示出根据本发明的实施例360度虚拟现实系统的示意图；

图2示出根据本发明的实施例基于立方体投影的示意图；

图3示出根据本发明的实施例在3D空间中的立方体的正方形投影面与2D平面上的正方形投影面之间的映射的示意图；