[发明专利]用于编码和解码全向视频的方法和装置

说明书

公开了一种用于解码大视场视频的方法。将所述大视场视频的至少一个图片表示为使用投影函数投影到至少一个2D图片上的3D表面。该方法包括，对于所述2D图片的至少一个当前块：‑确定与所述2D图片的另一个块相关联的运动矢量(dV)的至少一个分量的绝对值是否满足条件；‑基于所述确定，响应于所述投影函数将所述运动矢量(dV)变换成与所述当前块相关联的当前运动矢量(dP)；以及‑使用所述当前运动矢量(dP)来解码所述当前块。

技术领域

一种用于编码大视场视频的方法和装置，其中所述大视场视频的至少一个图片被表示为3D表面，所述表面使用投影函数被投影到至少一个2D图片上。还公开了对应的解码方法和装置。

背景技术

最近，可用的大视场(高达360°)内容有所增长。这种内容对于在沉浸式显示设备(诸如头戴式显示器(Head Mounted Display，HMD)、智能眼镜、PC屏幕、平板电脑、智能手机等)上观看内容的用户来说可能是不完全可见的。这意味着在给定的时刻，用户可能只在观看部分内容。然而，用户通常可以通过诸如头部移动、鼠标移动、触摸屏、语音等各种方式在内容内导航。通常期望对该内容进行编码和解码。

图2示出了使用等矩形投影(Equi-Rectangular Projection，ERP)从被表示为球体的表面S投影到单个矩形图片F上的示例。

图3A示出了从表面S(这里表示为立方体)投影到六个图片或六个面上的另一个示例。立方体的面可能会重新排列成单个图片，如图3B所示。

将3D表面投影到2D图片上可能会引入一些失真，诸如几何失真。例如，直线不再是直的，正交坐标系不再是正交的。在全向视频的连续图片之间的运动表示的情况下，3D表面上的块内部的运动可以被认为是同质的。然而，当3D表面的块被投影到2D图片上时，这种断言不再成立。

图4图示了表示全向视频的3D表面的投影图片F，其中对象40沿着轨迹移动。在由全向视频表示的场景中，对象40沿着直线移动。投影图片F中的得到的表观运动用虚线表示。图4B示出了对于图片F的任意块分割的得到的运动矢量。可以注意到，即使运动在呈现图片中是完全直的，要编码的图片F也显示出不均匀的运动矢量。对于携带运动对象40的信息的块A、B、C和D，运动矢量都不同。

在传统视频编码中，使用从邻近块确定的运动矢量预测量对运动矢量进行预测编码。例如，从块A、块B和/或块C的运动矢量预测块D的运动矢量。

在将3D表面S投影到2D图片F上之后，在邻近运动矢量与块D的运动矢量非常不同的情况下，邻近运动矢量可能不适于用于预测。在这种情况下，要编码的预测残差可能非常大，因此编码成本很高。

因此，需要一种编码和解码全向视频的新方法和装置。

发明内容

公开了一种用于解码大视场视频的方法。将所述大视场视频的至少一个图片表示为使用投影函数投影到至少一个2D图片上的3D表面。该方法包括，对于所述2D图片的至少一个当前块：

-确定与所述2D图片的另一个块相关联的运动矢量的至少一个分量的绝对值是否满足条件；

-基于所述确定，响应于所述投影函数将所述运动矢量变换成与所述当前块相关联的当前运动矢量；以及

-使用所述当前运动矢量来解码所述当前块。

还公开了一种用于解码大视场视频的装置。该装置包括：

-用于确定与所述2D图片的另一个块相关联的运动矢量的至少一个分量的绝对值是否满足条件的部件；

-用于基于所述确定，响应于所述投影函数将所述运动矢量变换成与所述当前块相关联的当前运动矢量的部件；以及

-用于使用所述当前运动矢量来解码所述当前块的部件。