[发明专利]用于包含多视点视频编码的参考图像管理的方法

说明书

相关申请的交叉引用

本申请要求2006年10月13日提交的美国临时申请60/851,522和 2006年10月13日提交的美国临时申请60/851,589的优先权，上述两个 临时申请在此全文并入作为参考。

技术领域

本发明涉及运动图像(moving pictures)领域，更具体地，涉及与多 视点视频编码(multview video coding)相关联的运动图形的存储维护 (memory maintenance)的课题。

背景技术

许多帧间编码(interframe encoding)系统使用参考图像(reference picture)，使用这种参考图像有助于降低编码比特流的大小。这样的结果就 是编码效率比仅仅使用帧内编码(intraframe encoding)技术要高。因此， 许多编码标准既包含帧内也包含帧间编码技术，以编码一系列移动图像的 比特流。在现有技术中，不同类型的参考图像用于编码标准，例如“I”图 像，其只使用图像自身内(帧内)的元素进行编码，又例如“B”图像， 其通过使用来自图像自身内部的元素和/或来自两个先前参考图像(帧间) 的元素进行编码，再例如“P”图像，其通过使用来自图像自身内部的元 素和/或来自一个先前参考图像(帧间)的元素进行编码。“B”图像和“P” 图像都可以使用多个参考图像，但是这两种类型的图像之间的区别在于， “B”图像每块可以使用至多两个运动补偿的预测信号的帧间预测，而“P” 图像对于每个预测块只允许使用一个预测器。

当“B”图像或“P”图像被编码和/或解码时，这种图像因而取决于 其他参考帧，从而这种图像在解码过程中可以被正确编码或构建。编码/ 解码系统应当提供某种类型的存储单元(memory location)，从而在其他图 像在由参考图像编码或解码时可以存储这种参考图像。显而易见，不久以 后，参考图像就不能被用于编码操作，因为不再有需要编码的图像在以后 的编码操作中使用参考图像。

虽然可以将全部参考图像永久地存储在存储装置中，但是这种方案将 导致存储器资源的无效率使用。因此，现有技术中的存储技术，例如先入 先出(FIFO)或后入后出(LIFO)存储操作，可以用于操作用来存储参 考图像的存储器，从而(通过丢弃不需要的参考图像)协助降低用于存储 这种参考图像的空间。但是当考虑使用多视点编码系统时(其中被编码和 /或解码的图像既具有时间相互关系也具有视点相互关系)，这种存储操作 就会产生不需要的结果。即，多视点编码系统会产生移动图像的多视点的 问题，其中每个视点代表各个对象/场景的不同视点。现在，参考图像将被 用于与两个不同视点相关联的图像的编码或者解码。因此，简单的存储技 术不能被用于这种环境。

发明内容

本发明能够解决现有技术的上述缺点和不足。本发明涉及一种用于再 利用可用的运动信息作为运动估计预测器以进行视频编码的方法和装置。

根据本发明原理的一个方面，提出了一种编码器，其根据来自由解码 器解码的图像的信息对存储在存储器中的参考图像进行存储管理操作，其 中这种信息与关联于该参考图像的视点信息相关。

通过下面结合附图对本发明的实施方式进行的详细说明，本发明的上 述和其他方面以及特征和优点将变得显而易见。

附图说明

根据参照下面附图的详细说明，本发明的原理将得到更好的理解。

图1是根据本发明实施方式的不同时间的视频图像视点的多视点编 码，其中这种视频图像使用参考图像按照图中所示的方式进行编码；

图2是根据本发明原理的视频编码器的示例性实施方式；

图3是在根据本发明实施方式所用的语法元素dec_ref_pic_marking() 的伪代码的实施方式；

图4是在根据本发明实施方式所用的语法元素 seq_parameter_set_mvc_extension()的伪代码的实施方式；

图5是在根据本发明实施方式所用的语法元素 dec_ref_pic_marking_mvc_extension()的伪代码的实施方式；

图6是在根据本发明实施方式所用的样本图像头部的实施方式；

图7是在根据本发明实施方式所用的语法元素 dec_ref_pic_marking_mvc_extension()的伪代码的实施方式；