[发明专利]用于包含多视点视频编码的参考图像管理的方法

说明书

本申请是申请日为2007年10月12日、申请号为200780038099.2、发明名称为“用于包含多视点视频编码的参考图像管理的方法”的专利申请的分案申请。

相关申请的交叉引用

本申请要求2006年10月13日提交的美国临时申请60/851，522和2006年10月13日提交的美国临时申请60/851，589的优先权，上述两个临时申请在此全文并入作为参考。

技术领域

本发明涉及运动图像（moving pictures）领域，更具体地，涉及与多视点视频编码（multview video coding）相关联的运动图形的存储维护（memory maintenance）的课题。

背景技术

许多帧间编码（interframe encoding）系统使用参考图像（reference picture），使用这种参考图像有助于降低编码比特流的大小。这样的结果就是编码效率比仅仅使用帧内编码（intraframe encoding）技术要高。因此，许多编码标准既包含帧内也包含帧间编码技术，以编码一系列移动图像的比特流。在现有技术中，不同类型的参考图像用于编码标准，例如“I”图像，其只使用图像自身内（帧内）的元素进行编码，又例如“B”图像，其通过使用来自图像自身内部的元素和/或来自两个先前参考图像（帧间）的元素进行编码，再例如“P”图像，其通过使用来自图像自身内部的元素和/或来自一个先前参考图像（帧间）的元素进行编码。“B”图像和“P”图像都可以使用多个参考图像，但是这两种类型的图像之间的区别在于，“B”图像每块可以使用至多两个运动补偿的预测信号的帧间预测，而“P”图像对于每个预测块只允许使用一个预测器。

当“B”图像或“P”图像被编码和/或解码时，这种图像因而取决于其他参考帧，从而这种图像在解码过程中可以被正确编码或构建。编码/解码系统应当提供某种类型的存储单元（memory location），从而在其他图像在由参考图像编码或解码时可以存储这种参考图像。显而易见，不久以后，参考图像就不能被用于编码操作，因为不再有需要编码的图像在以后的编码操作中使用参考图像。

虽然可以将全部参考图像永久地存储在存储装置中，但是这种方案将导致存储器资源的无效率使用。因此，现有技术中的存储技术，例如先入先出（FIFO）或后入后出（LIFO）存储操作，可以用于操作用来存储参考图像的存储器，从而（通过丢弃不需要的参考图像）协助降低用于存储这种参考图像的空间。但是当考虑使用多视点编码系统时（其中被编码和/或解码的图像既具有时间相互关系也具有视点相互关系），这种存储操作就会产生不需要的结果。即，多视点编码系统会产生移动图像的多视点的问题，其中每个视点代表各个对象/场景的不同视点。现在，参考图像将被用于与两个不同视点相关联的图像的编码或者解码。因此，简单的存储技术不能被用于这种环境。

发明内容

本发明能够解决现有技术的上述缺点和不足。本发明涉及一种用于再利用可用的运动信息作为运动估计预测器以进行视频编码的方法和装置。

根据本发明原理的一个方面，提出了一种编码器，其根据来自由解码器解码的图像的信息对存储在存储器中的参考图像进行存储管理操作，其中这种信息与关联于该参考图像的视点信息相关。

根据本发明原理的另一方面，提供了一种用于多视点视频编码的参考图像的存储管理的方法，该方法包括以下步骤：在存储器中存储第一参考图像，其中所述第一参考图像与存储状态和第一视点相关联，所述存储状态选自长期参考图像、短期参考图像、以及非用于参考图像；以及在对与第二视点相对应的图像执行了视频编码操作之后，通过分配存储改变指令以将所述存储状态改变为选自长期参考图像、短期参考图像、以及非用于参考图像的不同状态，来改变所述存储的第一参考画面的存储状态，所述改变取决于所述第一参考图像的第一视点和所述图像的第二视点。

通过下面结合附图对本发明的实施方式进行的详细说明，本发明的上述和其他方面以及特征和优点将变得显而易见。

附图说明

根据参照下面附图的详细说明，本发明的原理将得到更好的理解。

图1是根据本发明实施方式的不同时间的视频图像视点的多视点编码，其中这种视频图像使用参考图像按照图中所示的方式进行编码；

图2是根据本发明原理的视频编码器的示例性实施方式；

图3是在根据本发明实施方式所用的语法元素dec_ref_pic_marking()的伪代码的实施方式；