[发明专利]具有旋转信息的360°图像/视频内处理方法及装置

说明书

本发提供一种视频处理方法，包括：接收具有以360度虚拟现实(360‑degreeVirtual Reality，360VR)投影格式表示的360度图像/视频内容的当前输入帧，对该当前输入帧中的该360度图像/视频内容应用内容导向旋转，以生成具有以该360度虚拟现实投影格式表示的旋转的360度图像/视频内容的内容旋转帧，编码该内容旋转帧以生成比特流，以及通过该比特流发信至少一个语法元素，其中，该至少一个语法元素被设置为用于指示该内容导向旋转的旋转信息。

相关申请的交叉引用

本申请要求下列申请的优先权：2016年11月9日提出的申请号为62/419,513的美国临时案，2016年12月13日提出的申请号为62/433,272的美国临时案，2017年03月09日提出的申请号为62/469,041的美国临时案以及2017年11月03日提出的申请号为15/802,481的美国案。在此合并参考这些申请案的申请标的。

技术领域

本发明有关于360度图像/视频内容处理。更具体地，本发明涉及具有应用于以投影格式来表示的360度图像/视频内容的内容导向旋转的旋转信息的语法元素信令的视频编码功能的方法和设备和具有相关的视频解码功能的方法和设备。

背景技术

具有头戴式显示器(head-mounted display，HMD)的虚拟现实(Virtual reality，VR)与各种应用相关联。向用户显示广泛视野内容的能力可用于提供身临其境的视觉体验。必须捕捉所有方向上的真实世界的环境，从而生成对应于视野范围的全方位视频(omnidirectional video)。随着摄像机和HMD的进步，由于代表诸如360度图像/视频之类的内容所需的高比特率，而导致VR内容的传送可能很快遇到瓶颈。当全方位视频的分辨率为4k或更高时，数据压缩/编码对比特率的降低至关重要。

通常，将对应于视野范围的全方位视频转换成图像序列，其中的每一个图像序列都以360度虚拟现实(360-degree Virtual Reality，360VR)投影格式来表示，随后得到的图像序列被编码为用于传输的比特流。然而，由于移动对像被所应用的360VR投影格式分割和/或拉伸，原始的以360度虚拟现实投影格式表示的360度图像/视频内容可能具有较差的压缩效率。因此，需要一种能够提高以360VR投影格式表示的360度图像/视频内容的压缩效率的创新设计。

发明内容

本发明的目的之一是提供具有应用于以投影格式表示的360度图像/视频内容的内容导向旋转的旋转信息的语法元素信令的视频编码功能的方法和设备以及具有相关的视频解码功能的方法和设备。

根据本发明的第一方面，公开了一种视频处理方法。所述视频处理方法包括：接收具有以360度虚拟现实(360-degree Virtual Reality，360VR)投影格式表示的360度图像/视频内容的当前输入帧，将内容导向旋转应用于当前输入帧中的360度图像/视频内容以生成具有以360VR投影格式表示的旋转的360度图像/视频内容的内容旋转帧，编码所述内容旋转帧以生成比特流，以及通过所述比特流发信至少一个语法元素，其中，所述至少一个语法元素被设置为用于指示所述内容导向旋转的旋转信息。

根据本发明的第二方面，公开了一种视频处理方法。所述视频处理方法包括接收比特流，处理比特流以从比特流中获取至少一个语法元素，对比特流进行解码以生成具有以360度虚拟现实(360-degree Virtual Reality，360VR)表示的旋转的360度图像/视频内容的当前解码帧，以及根据当前解码帧以及由至少一个语法元素指示的内容导向旋转的旋转信息，在显示屏幕上渲染和显示输出图像数据，其中在生成旋转的360度图像/视频内容中涉及内容导向旋转。