[发明专利]在可伸缩视频编码和解码中的参考图像标记

说明书

技术领域

本部分旨在为权利要求书中陈述的本发明提供背景或上下文。 在此处的描述可能包括可以贯彻的概念，但不必是那些之前已经想 到或者贯彻的概念。因此，除非在此指出，否则在本部分中描述的 内容对于本申请的说明书和权利要求书而言不是现有技术，并且并 不因为包括在本部分中就被认为是现有技术。

本发明涉及可伸缩视频编码和解码。特别地，本发明涉及提供 用于可伸缩视频编码的增强的参考图像管理解决方案。

背景技术

视频编码标准包括ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual和ITU-T H.264(也称为ISO/IEC MPEG-4 AVC)。此外，当 前正在致力于开发新的视频编码标准。正在开发的一个类此标准是 可伸缩视频编码(SVC)标准，其将成为H.264/AVC的可伸缩扩展。 另一此类的努力涉及中国视频编码标准的开发。一个此类的视频编 码标准是：Joint Video Team，“Joint Draft 5：Scalable Video Coding”， 2006年1月，可从

http://ftp3.itu.ch/av-arch/jvt-site/2006 01 Bangkok/JVT-R201.zip获得。

SVC可以提供可伸缩视频比特流。可伸缩视频比特流的一部分 可以被提取并且解码成具有降级的回放视觉质量。可伸缩视频比特 流包含非可伸缩基本层和一个或多个增强层。增强层可以增强时间 解析度(即，帧率)、空间解析度或简单地由低层或其部分所代表 的视频内容的质量。在某些情况下，增强层的数据可以在某个位置 后截断，甚至在任意的位置，并且每个截断的位置可以包括代表不 断增强的视觉质量的某些附加数据。此类的可伸缩性被称为精细(粒 度)可伸缩性(FGS)。相比较于FGS，由不提供精细可伸缩性的 质量增强层所提供的可伸缩性称为粗粒度(CGS)。基本层也可以 被设计成FGS可伸缩。然而，当前没有视频压缩标准或草案标准实 现该概念。

在当前的SVC规范中提供时间可伸缩性(这里称为分层 (hierarchical)B图像编码结构)的机制不比AVC中的多。AVC完 全支持该特征并且信令部分可以通过使用子序列相关补充增强信息 (SEI)消息来完成。

对于提供空间和CGS可伸缩性的机制，类似于早期标准的常规 分层编码技术结合层间预测方法来使用。可以是层间预测数据的数 据包括帧内(intra)纹理、动作和冗余数据。单环解码可以通过受 限的帧间纹理预测模式来实现，由此层间帧内纹理预测可以应用到 宏块(MB)，对于这些宏块，基本层的相应块位于帧内MB，并且 同时位于基本层中的那些帧内MB使用受限的帧内预测。在单环解 码中，解码器仅需要对期望回放的可伸缩层(称为期望层)执行运 动补偿和全图像重构，因此解码复杂度被极大地减小。除期望层以 外的所有层不需要被完全解码，因为不用于层间预测(其是层间帧 内纹理预测、层间运动预测或层间冗余预测)的MB数据的所有数 据或一部分数据不需要用于期望层的重构。

空间可伸缩性已经被概括为使得基本层成为增强层的剪切和缩 放版本。量化和熵编码模块被调整以提供FGS能力。该编码模式称 为渐近细化，其中通过重复地减小量化步长并且应用类似于子位元 平面编码(sub-bitplane)的“循环”熵编码，变换系数的渐近细化 被编码。

当前草案SVC标准中的可伸缩层结构特征在于三个变量，称为 时间_级(temporal_level)、相关性_id(dependency_id)和质量_级 (quality_level)，它们可以在比特流中发送或可以根据规范导出。 时间_级变量用于指示时间分层或帧率。