[发明专利]用于改进的视频编码的参考帧重投影

说明书

讨论与视频编码有关的技术。这些视频编码技术包括：基于指示场景姿态变化的场景姿态差数据，将投影变换应用于重构参考帧；以及使用重投影后的重构参考帧作为运动补偿参考帧来执行运动补偿。

背景技术

现有的视频编解码器(例如，H.264或MPEG-4Part 10、高级视频编码(AVC)编解码器、H.265高效视频编码(HEVC)编解码器等)使用在分区大小可变的块上执行的运动补偿预测的原理进行操作。该运动估计和补偿对于当前帧的块可以使用基于块的搜索，以在一个或多个参考帧中寻找最佳匹配块。最佳匹配块是使用参考帧的参考索引以及指示当前帧块与参考帧中的最佳匹配块之间的运动的运动矢量来引用的。在编码器处经由运动估计找到的参考索引和运动矢量被编码到比特流中并且被发送到解码器。编码器和解码器二者在运动补偿中使用参考索引和运动矢量，以(在解码器侧处)重构用于进一步用作参考帧并且用于最终呈现的帧。当被编码的视频内容是基于单个相机模型(其可以摇摄(pan)但具有最小旋转、变焦、失真等)生成的时，这些技术可以是最高效的。然而，包括更高等级的旋转、变焦放大或缩小、失真等的内容可能提供了难度。

因此，可能有利的是，增加编解码器系统的压缩效率、视频质量和计算效率以便处理具有旋转、变焦和其它影响的视频内容。正是针对这些考虑和其它考虑，需要本改进。

附图说明

在附图中通过示例的方式而非通过限制的方式示出本文所描述的材料。为了说明的简明性和清楚性，附图所示的要素不一定按比例绘制。例如，为了清楚，一些要素的尺寸可以相对于其它要素被夸大。此外，在认为适当的情况下，在附图之间重复了标号，以指示对应或类似要素。在附图中：

图1是用于使用重投影后的重构参考帧进行视频编码(coding)的示例上下文的说明性示图；

图2是用于使用重投影后的重构参考帧进行视频编码(encoding)的示例编码器的说明性示图；

图3示出用于使用重投影后的重构参考帧进行视频解码的示例解码器的框图；

图4是示出用于使用重投影后的重构参考帧对视频进行编码的示例处理的流程图；

图5是示出用于基于评估场景姿态差数据而有条件地应用帧重投影的示例处理的流程图；

图6示出视频编码中使用的多个重投影后的重构参考帧的示例；

图7示出在变焦放大操作之后重投影后的重构参考帧的示例后处理；

图8示出在变焦缩小操作之后重投影后的重构参考帧的示例后处理；

图9示出仅应用于感兴趣区域的示例投影变换；

图10是示出用于使用重投影后的重构参考帧进行视频编码的示例处理的流程图；

图11是用于使用重投影后的重构参考帧进行视频编码的示例系统的说明性示图；

图12是示例系统的说明性示图；以及

图13示出均根据本公开的至少一些实现方式所布置的示例小形数(form factor)设备。

具体实施方式

现在参照附图描述一个或多个实施例或实现方式。虽然讨论了特定的配置和布置，但应理解，这仅是为了说明的目的而进行的。本领域技术人员将认识到，在不脱离说明书的精神和范围的情况下，可以采用其它配置和布置。对于本领域技术人员显而易见的是，也可以在除了本文所描述的之外的各种其它系统和应用中采用本文所描述的技术和/或布置。