[发明专利]图像处理方法及图像处理装置

说明书

技术领域

本发明涉及一种图像处理方法及图像处理装置，尤其涉及一种进行用于解码立体影像格式的图像的图像处理的图像处理方法及图像处理装置。

背景技术

近年来随着对立体影像(3D影像)的关注度的提高，与立体影像的传送/记录的格式相关的研讨也变得盛行。其中，并排(Side-by-Side；SBS)格式和上下(Above-Below；AB)格式中，将两个画面分别水平/垂直压缩的图像作为一个画面传送，因此其优点是，除了可直接使用现有的传送系统外，无需考虑左右通路的同步。尤其是，SBS格式正变为播放/发送系统的3D内容的标准规格之一。

并且，近年来随着显示装置的大型化/高精细化，对影像内容也希望实现高析像度化。因此，对于将用现有的非高析像度制作的内容以高析像度化的形式视听的装置，称为“超析像度”技术，在很多电视装置等中被应用。由低析像度图像生成高析像度图像的尝试一直在进行，其中，对于综合具有多帧位置偏移的低析像度图像、生成高析像度图像的方法，展开了极广泛的研究。专利文献1～4公开了由低析像度动画制作高精细动画的方法。

专利文献1：特开2004-56789号公报

专利文献2：特开2007-205号公报

专利文献3：特开2007-257042号公报

专利文献4：特开2008-17241号公报

发明内容

SBS格式和AB格式通过将两个画面分别水平/垂直压缩的工序，水平/垂直像素数变为一半，因此对于通过一般的双线性方式、双立体方式解码为原来大小的两个图像，存在水平/垂直方向的析像度分别变低的问题。

而上述专利文献1～4所述的发明分别对提高画质/提高处理效率的帧间综合型的高析像度化作出了研究。但作为这种帧间综合型的高析像度化整体的问题，当帧间不存在对应部分时，存在画质未被改善的问题。进一步，在帧间综合型的高析像度化中，在较大范围精密进行新追加的每个标本点的详细的动作推测时，为进行搜索，存在需要较大计算成本的问题。

本发明鉴于以上问题而出现，其目的在于提供一种对由水平方向或垂直方向上压缩为1/2大小的两个图像构成的一组立体图像，进行和帧间综合型高析像度化处理相比简单的、基于动作推测的高析像度化处理，获得高画质的、本来大小的立体图像的图像处理方法及图像处理装置。

为实现上述目的，本发明的图像处理方法特征在于包括以下步骤：搜索步骤，对于将一组立体图像分别在水平方向上压缩为1/2大小而获得的压缩立体图像在水平方向上排列而形成一个图像的输入图像的、左半部分区域的图像和右半部分区域的图像中的一方区域的图像，将其作为实施了基于像素内插的析像度提高处理的被高析像度化图像，将另一方区域的图像作为用于提高析像度的参照图像，构成由被高析像度化图像中的内插对象位置周边的预定个数的像素形成的块，并且搜索该构成的块以及在参照图像中进行图形匹配的参照块；候选值决定步骤，在通过搜索步骤搜索到的参照块中，将被高析像度化图像的内插对象位置所对应的像素的像素值决定为内插像素候选值；以及内插处理步骤，将通过候选值决定步骤决定的内插像素候选值适用于被高析像度化图像的内插对象位置的被高析像度化图像以及参照图像，作为立体图像输出。

在此，其特征还在于，上述搜索步骤中，将上述被高析像度化图像的在上述块内的水平方向上相邻的两个像素的中心位置作为内插对象位置，对这些内插对象位置通过使用由搜索用像素和实际的像素形成的块进行在水平方向上以实际的像素间距换算为1/2像素间距的搜索，其中该搜索用像素配置在这些内插对象位置且将上述相邻的两个像素的像素值的平均值作为像素值。

并且，为实现上述目的，本发明的图像处理方法的特征在于包括以下步骤：搜索步骤，对于将一组立体图像分别在垂直方向上压缩为1/2大小而获得的压缩立体图像在垂直方向上排列而形成一个图像的输入图像的、上半部分区域的图像和下半部分区域的图像中的一方区域的图像，将其作为实施了基于像素内插的析像度提高处理的被高析像度化图像，将另一方区域的图像作为用于提高析像度的参照图像，构成由上述被高析像度化图像中的内插对象位置周边的预定个数的像素形成的块，并且搜索该构成的块以及在上述参照图像中进行图形匹配的参照块；候选值决定步骤，在通过上述搜索步骤搜索到的上述参照块中，将上述被高析像度化图像的上述内插对象位置所对应的像素的像素值决定为内插像素候选值；以及内插处理步骤，将通过上述候选值决定步骤决定的上述内插像素候选值适用于上述被高析像度化图像的内插对象位置的上述被高析像度化图像以及上述参照图像，作为上述立体图像输出。