[发明专利]针对编码标准可扩展性的层间参考图片处理

说明书

相关申请的交叉引用

本申请要求2012年9月27日提交的美国临时专利申请No.61/706,480的优先权，其全文内容通过引用并入于此。

技术领域

本发明总体上涉及图像。更特别地，本发明实施例涉及针对编码标准可扩展性(coding-standard scalability)的层间参考图片处理。

背景技术

在多媒体内容的开发、存储、分发和消费中，音频和视频压缩是关键要素。压缩方法的选择涉及编码效率、编码复杂度和延时当中的权衡。随着处理能力对计算成本的比率增大，允许开发考虑到了更高效的压缩的更复杂的压缩技术。例如，在视频压缩中，国际标准化组织(ISO)的运动图像专家组(MPEG)通过发布MPEG-2、MPEG-4(第2部分)以及H.264/AVC(或MPEG-4，第10部分)编码标准来持续改进原始的MPEG-1视频标准。

尽管H.264的压缩效率和成功，现在仍在开发被称为高效率视频编码(HEVC)的新一代的视频压缩技术。期望HEVC提供比现有的H.264(也称为AVC)标准有所提高的压缩能力，HEVC的草案可见于“High efficiency video coding(HEVC)text specification draft 8”,ITU-T/ISO/IEC视频编码联合组(JCT-VC)文件JCTVC-J1003，2012年7月，B.Bross、W.-J.Han、G.J.Sullivan、J.-R.Ohm和T.Wiegand，其全文内容通过引用并入于此，H.264公布为“Advanced Video Coding for neneric audio-visual services”,ITU T Rec.H.264 and ISO/IEC 14496-10，其全文内容通过引用并入于此。在此如本发明人所认识到的，预计在今后几年H.264将仍然是全世界用于分发数字视频的主流视频编码标准。还认识到，较新的标准比如HEVC应当允许后向兼容现有的标准。

如在此所使用的，术语“编码标准”表示可都为基于标准的、开源的或专有的压缩(编码)和解压(解码)算法，诸如MPEG标准、windows媒体视频(WMV)、flash视频、VP8等。

在这部分中描述的方法是可以实行的方法，但是不一定是先前已经构思或实行的方法。所以，除非另有表明，否则不应当认为在这部分中描述的任何方法仅仅由于包括在这个部分中就被当作现有技术。类似地，关于一种或多种方法而发现的问题也不应当认为根据该部分而已在任何现有技术认识到，除非另有表明。

附图说明

在附图中，以示例的方式而非限制的方式来例示本发明的实施例，并且其中相同的附图标记指代相同的要素，其中：

图1描绘了根据本发明实施例的支持编码标准可扩展性的编码系统的示例性实现；

图2A和图2B描绘了根据本发明实施例的支持AVC/H.264和HEVC编解码器可扩展性的编码系统的示例性实现；

图3描绘了根据本发明实施例的带有裁切窗口的分层编码的示例；

图4描绘了根据本发明实施例的针对隔行图片的层间处理的示例；

图5A和图5B描绘了根据本发明实施例的支持编码标准可扩展性的层间处理的示例；

图6描绘了根据本发明实施例的针对信号编码模型可扩展性的RPU处理的示例；

图7描绘了根据本发明实施例的示例性编码过程；

图8描绘了根据本发明实施例的示例性解码过程；并且

图9描绘了根据本发明实施例的示例性解码RPU过程。

具体实施方式

在此描述针对编码标准可扩展性的层间参考图片处理。给定了由符合第一编码标准(如H.264)的基本层(base layer，BL)编码器编码的基本层信号，参考处理单元(RPU)过程根据基本层以及一个或多个增强层(enhancement layer，EL)中的输入信号的特性来产生参考图片和RPU参数。这些层间参考帧可以由符合第二编码标准(如HEVC)的增强层编码器使用，以压缩(编码)一个或多个增强层的信号，并且将其与基本层结合以形成可扩展的比特流。在接收器中，在用符合第一编码标准的BL解码器对BL流进行解码后，解码器RPU可以应用收到的RPU参数从解码后的BL流产生层间参考帧。这些参考帧可以由符合第二编码标准的EL解码器用来对编码的EL流进行解码。