[发明专利]编码多个输入图像的方法及装置、存放程序的存储介质

说明书

技术领域

本发明涉及对分别包含被摄体的不同信息的不同种类的多个输入图像进行编码的方法及装置、以及存放程序的存储介质。

背景技术

现有技术中，对于由在时域上配置的帧序列构成的运动图像，考虑其帧间的冗余性的影像编码(videocoding)方法是已知的(例如，参照非专利文献1)。在典型的影像编码方法中，取代所输入的原始图像而传输P帧(predictedframe；预测帧)和/或B帧(bi-directionalpredictedframe；双向预测帧)。P帧是通过前向预测而计算出的帧，B帧是通过前向预测、后向预测以及双向预测当中的任一者而计算出的帧。

非专利文献2公开将这样的影像编码的技术扩展至时域以及空间域来进行应用的方法。即，根据非专利文献2的示教内容，能对于在时域以及空间域上配置的多个帧，生成P帧和/或B帧。

作为在空间域上配置的帧序列的一例，能列举在使用多视点影像提供高清晰度的立体影像的三维影像技术中所使用的帧序列。这样的立体影像通过以非常多的视点(例如，200个视点)分别摄像被摄体而得到的多视点影像来实现。通过使用视点内插，对于在空间域上配置的帧序列，也能适用与针对在时域上配置的帧序列的编码同样的方法，该视点内插使用距离图这样的三维信息来生成P帧和/或B帧。

非专利文献3公开与多视点影像的编码有关的手法。非专利文献3公开如下手法：不仅在时域上而且在空间域上也使用视点内插，从而根据深度信息等的三维信息来生成P帧和/或B帧。

此外，在本说明书中，将数据压缩(变换)为与目的相符的码这一动作记为编码(encoding)，将变换后的码复原(解码)为原始的数据这一动作记为译码(decoding)。另外，编码处理(coding)这一用语指编码单体、以及编码和译码这两者。

现有技术文献

非专利文献

非专利文献1:ThomasWiegand,GaryJ.Sullivan,GisleBjontegaard,andAjayLuthra,OverviewoftheH.264/AVCVideoCodingStandard,IEEETransactionsonCircuitsandSystemsforVideoTechnology,Vol.13,No.7,pp.560-576,July2003

非专利文献2:P.Merkle,K.Muller,A.Smolic,andT.Wiegand,EfficientCompressionofMulti-viewVideoExploitinginter-viewdependenciesbasedonH.264/MPEG4-AVC,Proc.ICME2006,pp.1717-1720

非专利文献3:S.Yea,A.Vetro,Viewsynthesispredictionformultiviewvideocoding,SignalProcessing:ImageCommunication24(2009)pp.89-100.

发明内容

发明要解决的课题

根据非专利文献1～3所公开的方法，生成的P帧以及B帧是以残差(residualvalue)的形式进行传输的。在此，对残差的信息进一步执行数据压缩处理。在该数据压缩处理中，执行图像变换(典型地，离散余弦变换)、量化、熵编码(entropycoding)等。在数据压缩率高的情况下，由于执行量化，数据尺寸减小，从而产生显著的数据损失。也就是，其值小的残差的信息基于数据压缩处理而丢失。

另一方面，关于边缘信息(edgeinformation)或边界信息(boundaryinformation)这样的几个图像的特征量，必须保证：即使数据压缩率提高，该特征量也不发生丢失。

对于分别包含被摄体的不同信息的不同种类的多个输入图像，在压缩效率以及压缩质量这两者间取得平衡的编码技术是需要的。

用于解决课题的手段