[发明专利]用于小子块仿射帧间预测的方法和装置

说明书

本申请各方面提供视频解码的方法和装置。一些例子中，视频解码的装置包括处理电路。该处理电路用于对已编码视频码流中当前图像中的块的预测信息进行解码。预测信息指示帧间预测模式中的仿射模型。该处理电路用于根据所述仿射模型确定所述块的控制点的运动矢量。该处理电路用于根据确定的所述控制点的运动矢量来确定所述块的子块的运动矢量，所述子块的宽度和高度之一小于4。此外，该处理电路用于根据确定的所述运动矢量，重建所述子块的至少一个样本。

相关文件

本申请要求2019年3月13日提交的第62/818,068号美国临时申请案“使用小子块的仿射帧间预测(Affine Inter Prediction with Small Subblocks)”的优先权、2020年3月12日递交的第16/816,562号美国申请案“使用小子块的仿射帧间预测方法及装置(Method and Apparatus for Affine Inter Prediction with Small Subblocks)”的优先权，所述申请以全文引用方式并入本申请。

技术领域

本申请实施例涉及视频编解码领域。

背景技术

本文提供的背景描述是为了呈现本申请的背景。记名的发明人的工作，在该背景部分描述的工作以及本说明书各实施例的范围内的内容，在递交时可能并不算作现有技术，均未被明示或暗示地承认作为不利于本申请的现有技术。

目前，可使用帧间图像预测结合运动补偿来执行视频编码和解码。未压缩的数字视频通常包括一系列图像。例如，每个图像具有1920×1080分辨率的亮度采样和相关的色度采样。所述一系列图像可具有例如每秒60个图像或60Hz的固定或可变图像速率(也被称作帧率)。因此，未压缩视频具有显著的位速率要求。举例来说，每采样8位的1080p60 4:2:0视频(60Hz帧率下的1920×1080亮度采样分辨率)需要接近1.5Gbit/s的带宽。长度为一小时的此类视频需要超过600GB的存储空间。

视频编码和解码的一个目的可以是通过压缩来减少输入视频信号中的冗余。压缩有助于降低上述带宽或存储空间要求，在一些情况下可降低两个数量级或更多。通常情况下，可使用无损压缩和有损压缩以及其组合。无损压缩是指可从压缩的原始信号重建原始信号的精确副本的技术。当使用有损压缩时，重建的信号可能与原始信号不同，但原始信号与重建的信号之间的失真很小，因而重建的信号能够实现所期望的用途。视频领域中广泛采用有损压缩。容许的失真量因不同应用而异。例如，消费型直播应用的用户比电视节目应用的用户能容忍更高的失真。可实现的压缩比可反映出：可允许的/可容许的失真越高，可产生的压缩比越高。

运动补偿可以是有损压缩技术，且可关联以下技术：对于来自先前已重建的图像或其中一部分(参考图像)的样本数据块，在由运动矢量(motion vector，MV)指示的方向上发生空间偏移之后，可用于预测新重建的图像或图像的一部分。在一些情况下，参考图像可与当前正在重建的图像相同。各个MV可具有两个维度X和Y，或三个维度，第三维度指示正在使用的参考图像(间接地，第三维度还可以是时间维度)。

在一些视频压缩技术中，可根据其它MV预测适用于某一样本数据区域的MV，所述其它MV例如是，与正在重建的区域空间相邻近的另一样本数据区域相关、且解码次序是在所述某一样本数据区域的MV之前。如此，可极大减少对MV进行编码所需的数据量，由此消除冗余且提高压缩。举例来说，当对来自相机的输入视频信号(称为原始视频)进行编码时，存在如下的统计可能性：比单个MV区域更大的多个区域会在相似的方向上移动，因此，在一些情况下，可使用从相邻区域的MV提取的相似运动矢量进行预测，因此，MV预测非常有效。采用这种方式，使得针对给定区域确定的MV与根据周围MV预测的MV类似或相同，且在熵编码之后，表示MV的位数小于在对MV直接编码的情况下所使用的位数。在一些情况下，MV预测可以是针对从原始信号(即：样本流)提取的信号(即：MV)进行无损压缩的实施例。在其它情况下，MV预测本身可能是有损的，例如，在根据周围若干MV计算预测因子时，由于化整误差导致的有损。