[发明专利]图像处理设备和图像处理方法

说明书

本申请是申请号为201010295777.7、申请日为2010年9月29日、发明名称为“图像处理设备和图像处理方法”的发明专利申请的分案申请。

技术领域

本发明涉及图像处理设备和图像处理方法。更具体地讲，本发明涉及这样的图像处理设备和图像处理方法：当由在连续的不同定时捕获的来自多个视点的图像所组成的立体图像按照在连续的不同定时显示来自各个视点的图像的方式被显示时，允许显示看起来自然的立体图像。

背景技术

近年来，支持诸如运动图像专家组（MPEG）的压缩方案的设备已越来越普遍地应用于广播站的信息分发以及一般消费者家中的信息接收，其中为了实现信息的高效传输和累积，通过利用图像信息特定的冗余，图像信息被作为数字信号进行处理并且使用诸如离散余弦变换的正交变换和运动补偿进行压缩。

具体地讲，例如，在经诸如卫星广播、有线电视（TV）或互联网接收到使用编码方案压缩的图像信息（比特流）或者在诸如光盘、磁盘或闪存的存储介质上处理所述图像信息时使用的编码设备和解码设备已越来越普遍，其中所述编码方案利用诸如离散余弦变换或Karhunen-Loève变换的正交变换和运动补偿（诸如MPEG或H.26x）。

例如，MPEG-2（国际标准化组织（ISO）/国际电工委员会（IEC）13818-2）被定义为通用图像编码方法，并且是覆盖隔行扫描图像（隔行图像）和逐行扫描图像（逐行图像）以及标准清晰度图像和高清晰度图像的标准，其如今已广泛用于包括专业应用和消费应用的很多种应用。MPEG-2压缩方案通过例如将4至8Mbps的码率（比特率）分配给横向和纵向上具有720×480像素的标准清晰度隔行扫描图像，或者将18至22Mbps的码率分配给横向和纵向上具有1920×1088像素的高清晰度隔行扫描图像来促进图像的高压缩比和高品质实现。

MPEG-2主要提供适合于广播的高品质编码，但是不支持比MPEG-1的码率（比特率）更低的码率（即，更高压缩比）的编码系统。随着移动终端越来越普及，未来对这样的编码系统的需求将增加。为了满足这种需求，MPEG-4编码已标准化。至于图像编码，已在1998年12月通过了ISO/IEC 14496-2标准作为国际标准。

另外，高级视频编码（AVC）（MPEG-4第10章，ISO/IEC14496-10，国际电信联盟远程通信标准化组（ITU-T）H.264）也已标准化。AVC标准是由联合视频编码组（JVT）开发的，JVT由ITU-T和ISO/IEC联合组建以促进图像编码的标准化。

与MPEG-2或MPEG-4一样，AVC也是包括运动补偿编码和离散余弦变换编码的混合编码方案。通常，与诸如MPEG-2和MPEG-4的现有编码方案相比，AVC包含更大量的用于编码和解码的计算，但是能够实现更高的编码效率。

同时，随着近来能够实现立体视觉的立体图像捕获和显示技术的进步，除了二维图像内容之外，将使用上述编码方案编码的图像内容还可能包括立体图像内容。

具体地讲，开发了对立体图像进行编码的扩展AVC，并且开发了能够对使用多个图像捕获设备捕获的形成立体图像的多视点图像进行编码的多视点视频编码（MVC）的标准化。在例如日本未审查专利申请公布No.2008-182669中公开了一种对多视点图像进行编码和解码的方法。

在下文中，作为例子，将在由视点数最少的双视图像组成的三维（3D）图像（立体图像）的情况下描述形成立体图像的多视点图像。

形成3D图像的左眼图像（以下，称作“L图像”）和右眼图像（以下，称作“R图像”）可以是在相同捕获定时捕获的图像，或者是在连续的不同捕获定时捕获的图像，所述L图像是用左眼观察到的图像，所述R图像是用右眼观察到的图像。

另外，使用专用图像显示设备显示立体图像。该图像显示设备的显示方法可以是在连续的不同定时显示形成3D图像的L图像和R图像的方法，或者是同时显示L图像和R图像的方法。

发明内容

在现有的被构造为在连续的不同定时显示L图像和R图像的图像显示设备中，无论L图像和R图像被拍摄时的捕获定时如何，均按照预定次序显示L图像和R图像。

因此，以连续的不同捕获定时捕获的L图像和R图像可能按照与实际图像捕获次序不同的次序显示。这会使用户觉得所得图像不自然。

因此，期望当由在连续的不同定时捕获的来自多个视点的图像所组成的立体图像按照来自各个视点的图像在连续的不同定时显示的方式被显示时，能够显示看起来自然的立体图像。