[发明专利]用于对360度视频进行译码的自适应参数

说明书

本发明提供用于处理360度视频数据的技术和系统。举例来说，可获得所述360度视频数据的图片。所述图片可包含从三维格式投影成二维格式的样本。可确定所述图片的至少一个样本的权重值。可至少基于所述至少一个样本在所述图片中的位置来确定所述权重值。可使用所确定的权重值来确定所述至少一个样本的至少一个自适应参数。所述至少一个自适应参数可包含自适应加权失真、自适应加权量化参数值或自适应加权拉姆达值中的一或多个。可使用所述至少一个样本的所述至少一个自适应参数来确定与使用一或多个译码模式对所述至少一个样本进行译码相关联的成本。

技术领域

本申请涉及处理360度视频。更具体地说，本申请涉及用于确定用于对360度视频进行译码的一或多个自适应参数的系统和方法。

背景技术

许多装置和系统允许处理并且输出视频数据以用于消费。数字视频数据包含大量数据以满足消费者和视频供应商的需求。举例来说，视频数据的消费者希望视频具有最佳的质量以及高保真度、分辨率、帧率等等。一种类型的视频是360度视频。360度视频可为查看者提供沉浸式体验。举例来说，360度视频可为查看者提供虚拟现实体验，将查看者置于虚拟地不同的时间和/或空间。作为另一实例，360度视频可为查看者提供由远程装置(例如，无人机、移动装置、相机装置和/或其它装置)捕获的视频内容的第一人称视图。

发明内容

在一些实例中，本文中描述用于确定用于对360度视频进行译码的一或多个自适应参数的技术和系统。自适应参数也可在本文中被称作自适应编码参数。360度视频的投影方案跨图片具有非均匀失真。在一个说明性实例中，具有等矩形投影(ERP)的360度视频的图片产生二维图片，所述二维图片的极区域具有比图片的赤道(中间)区域更高的失真。图片也可在本文中被称作帧(例如，视频帧)或图像。在此些情况下，由于用以选择合适的译码模式的速率失真优化分析，编码器可能在极区域中消耗更多位。用于极区域的更多位使得在极区域中的视口的质量高于在赤道区域中的视口的质量。视口是指可经显现以供显示的360度场景内的特定视图。

一或多个自适应参数考虑当将360度视频的三维(例如，球形)视频数据投影成二维格式时引入的非均匀失真。举例来说，360度视频的投影方案的非均匀失真特性可经利用以通过确定与不同区中的失真成比例的一或多个自适应参数并将其应用到360度视频的图片内的不同区来改进360度视频的压缩效率。在一些情况下，一或多个自适应参数可用以选择译码模式以对图片的一或多个样本(例如，像素、像素块、一行块等)进行译码。举例来说，译码模式可基于成本(例如，速率失真成本或其它合适的度量)而选择，所述成本可基于一或多个自适应参数而确定。

在一些实例中，可确定一或多个样本(例如，像素、像素块、一行块等)的权重，且所述权重可用以确定一或多个样本的一或多个自适应参数。在一些情况下，可确定一或多个样本的归一化权重，且所述归一化权重可用以确定一或多个自适应参数。在一些实例中，一或多个自适应参数可包含自适应加权失真、自适应加权量化参数(QP)值和/或自适应加权拉姆达值。一或多个样本的一或多个自适应参数(例如，自适应加权失真、自适应加权QP值和/或自适应加权拉姆达值)可接着用以确定与使用一或多个译码模式对一或多个样本进行译码相关联的成本。

根据至少一个实例，提供一种处理360度视频数据的方法。所述方法包括获得360度视频数据的图片。所述图片包括从三维格式投影成二维格式的样本。所述方法进一步包括确定图片的至少一个样本的权重值。至少基于所述至少一个样本在所述图片中的位置来确定所述权重值。所述方法进一步包括使用所确定的权重值来确定所述至少一个样本的所述至少一个自适应参数。所述至少一个自适应参数包括自适应加权失真、自适应加权量化(QP)参数值或自适应加权拉姆达值中的一或多个。所述方法进一步包括确定与使用一或多个译码模式对至少一个样本进行译码相关联的成本。使用针对所述至少一个样本确定的所述至少一个自适应参数来确定所述成本。