[发明专利]编码全局旋转运动补偿图像的方法，设备和流

权利要求书

1.一种根据3D场景中的全向采集系统的参考方向编码流中的全向图像的方法，所述方法包括：

根据3D到2D映射算子和所述全向采集系统的正面方向，通过将所述3D场景映射到第一全向图像平面上来获得第一全向图像（I1）；

根据所述3D到2D映射算子和所述正面方向与所述参考方向之间的角度来确定旋转参数；

根据所述旋转参数对第三全向图像（I2）应用全局旋转运动补偿来获得第二全向图像（I3），所述第三全向图像（I2）是：

所述第一全向图像，或

通过将均响应于所述第一全向图像的残差图像和运动预测图像相加而获得的重建的全向图像；

通过在使用残差数据和运动向量的运动补偿模块中输入所述第二全向图像来生成所述全向图像；和

对所述流中的所述全向图像和所述旋转参数进行编码。

2.一种根据全向采集系统的参考方向解码来自流的全向图像的方法，所述方法包括：

获得来自所述流的第一全向图像和旋转参数，所述第一全向图像表示根据3D到2D映射算子和全向采集系统的正面方向映射到第一全向图像平面上的3D场景，并且所述旋转参数根据所述3D到2D映射算子和所述正面方向与所述参考方向之间的角度来确定；

通过在使用残差数据和运动向量的运动补偿模块中输入所述第一全向图像来获得第二全向图像；和

根据所述旋转参数对第三全向图像（I4，I7）应用全局旋转运动补偿来获得所述全向图像，所述第三全向图像是：

所述第二全向图像，或

通过将均响应于所述第二全向图像的残差图像和运动预测图像相加而获得的重建的全向图像。

3.一种用于对流中的全向图像进行编码的设备，所述设备包括至少与处理器相关联的存储器，所述处理器被配置为：

根据3D到2D映射算子和全向采集系统的正面方向，通过将3D场景映射到第一全向图像平面上来获得第一全向图像（I1）；

根据所述3D到2D映射算子和所述正面方向与参考方向之间的角度来确定旋转参数；

根据所述旋转参数对第三全向图像（I2）应用全局旋转运动补偿来获得第二全向图像（I3），所述第三全向图像（I2）是：

所述第一全向图像，或

通过将均响应于所述第一全向图像的残差图像和运动预测图像相加而获得的重建的全向图像；

通过在使用残差数据和运动向量的运动补偿模块中输入所述第二全向图像来生成所述全向图像；和

对所述流中的所述全向图像和所述旋转参数进行编码。

4.一种用于根据全向采集系统的参考方向对来自流的全向图像进行解码的设备，所述设备包括至少与处理器相关联的存储器，所述处理器被配置为：

获得来自所述流的第一全向图像和旋转参数，所述第一全向图像表示根据3D到2D映射算子和全向采集系统的正面方向映射到第一全向图像平面上的3D场景，并且所述旋转参数根据所述3D到2D映射算子和所述正面方向与所述参考方向之间的角度来确定；

通过在使用残差数据和运动向量的运动补偿模块中输入所述第一全向图像来获得第二全向图像；和

根据所述旋转参数对第三全向图像（I4，I7）应用全局旋转运动补偿来获得所述全向图像，所述第三全向图像是：

所述第二全向图像，或

通过将均响应于所述第二全向图像的残差图像和运动预测图像相加而获得的重建的全向图像。

5.一种非暂时性处理器可读介质，其中存储有用于使处理器至少执行根据权利要求1或2所述的方法的步骤的指令。

6.一种用于被编码为比特流的大视场视频的沉浸式呈现的系统，至少包括：

用于从数据网络接收所述比特流的网络接口（600），

用于根据权利要求4对所述比特流进行解码的设备（700），

沉浸式呈现设备（900）。