[发明专利]基于渲染引擎生成和显示全景图像的方法和显示装置

权利要求书

1.一种基于与显示装置相关联的渲染引擎生成全景图像的方法，包括：

确定被配置为多边形棱柱的显示模型，用于与场景的全景视图对应的渲染引擎；

使用与所述渲染引擎相关联的多个采样相机在朝向所述多边形棱柱的多个子平面的相应方向上捕获所述全景视图的多个样本子图像；

将所述多个样本子图像附加到相应的多个子平面以形成构建的显示模型；

由所述渲染引擎渲染所述构建的显示模型以重建全景图像；以及

在所述显示装置上显示所述全景图像。

2.根据权利要求1所述的方法，其中，所述多边形棱柱是等边N侧面多边形棱柱，其中N是不小于3的整数。

3.根据权利要求2所述的方法，其中，确定显示模型包括确定分别从所述等边N侧面多边形棱柱的每一个侧面或顶面或底面划分的所述多个子平面。

4.根据权利要求3所述的方法，其中，确定显示模型还包括：确定与所述等边N侧面多边形棱柱的不同平面的相应的多个子平面对应的不同图像分辨率，并基于tan(u/2)/tan(v/2)的比率确定所述多个子平面中的每一个的宽度和长度以及宽长比，其中u是从所述多个采样相机中的至少一个投射到所述多个子平面中的每一个的水平视场角，v是从所述多个采样相机中的所述至少一个投射到所述多个子平面中的每一个的垂直视场角。

5.根据权利要求4所述的方法，其中，所述多个采样相机中的所述至少一个位于所述显示模型的中心。

6.根据权利要求4所述的方法，其中，使用与所述渲染引擎相关联的多个采样相机捕获多个样本子图像包括：在从所述多个采样相机中的一个朝向多个子平面中的一个投射的相应一个方向上，根据场景以独立定义的图像分辨率分别对所述多个样本子图像中的每一个进行采样。

7.根据权利要求6所述的方法，其中，针对单个子平面的独立定义的图像分辨率被配置为比传统模型中的单个视场图像所允许的最大图像分辨率大若干倍。

8.根据权利要求4所述的方法，其中，使用与所述渲染引擎相关联的多个采样相机捕获多个样本子图像包括：通过略微增大视场角以使分别针对朝向所述顶面的顶视图和朝向所述底面的底视图的投射正方形大于所述顶面或所述底面，在所述投射正方形中捕获至少两个样本子图像。

9.根据权利要求4所述的方法，其中，使用与渲染引擎相关联的多个采样相机捕获多个样本子图像包括：使用两组采样相机针对所述多个子平面捕获具有视差的两组样本子图像；以及，基于具有视差的两组样本子图像重建3D全景图像。

10.根据权利要求1所述的方法，其中，将所述多个样本子图像附加到相应的多个子平面包括：执行UV映射以将每个样本子图像的图像纹理添加到对应的子平面，以及生成用于所述渲染引擎的构建的显示模型。

11.根据权利要求1所述的方法，其中，使用与所述渲染引擎相关联的多个采样相机捕获多个样本子图像还包括：针对所述显示模型的所述多个子平面中的每一个，以采样频率按时间顺序采样一系列样本子图像；根据被采样的顺序编码同一子平面的所有样本子图像，以生成样本子视频；以及将所述样本子视频附加到对应的子平面以形成所述构建的显示模型。

12.根据权利要求11所述的方法，其中，渲染所述构建的显示模型包括：对同时采样的分别用于所述多个子平面的多个样本子图像进行渲染，以同时生成一个全景图像，并通过按时间顺序编码一系列全景图像来进一步生成全景视频。

13.根据权利要求12所述的方法，其中，显示全景图像包括：通过至少显示单独针对在视场方向上的相应一个子平面的子视频，在所述显示装置上显示所述全景视频。