[发明专利]用于产生视差值的图像处理方法和设备

说明书

本申请要求于2012年1月18日提交到韩国知识产权局的第10-2012-0005746号韩国专利申请的优先权利益，该申请的公开通过引用合并于此。

技术领域

一个或多个示例实施例涉及一种用于处理图像的方法和设备，更具体地，涉及一种可基于图像和初始视差图来产生最终视差图的设备和方法。

背景技术

当基于立体图像或多视图图像执行场景重建或深度估计时，可在特定视图中观察到一部分预定对象或整个预定对象，然而，在其他视图中无法观察到所述一部分预定对象或整个预定对象。例如，当捕捉对象的相机被移动时或当观看对象的视点被改变时，现在可从改变的视点看到在改变视点之前未显示出的区域。这种事件可被称为遮挡(occlusion)。

被遮挡的部分在多个视图中可能不具有对应性。因此，理论上无法估计被遮挡的部分的三维(3D)位置。

为了解决由遮挡所引起的问题，可使用各种处理遮挡的方法。

发明内容

上述和/或其他方面通过提供一种图像处理设备来实现，所述图像处理设备包括：接收单元，用于接收包括像素的色彩信息的图像和包括像素的视差信息的初始视差图；约束确定单元，用于确定约束；产生单元，用于通过在确定的约束下向所述像素之中的两个彼此相邻并具有相似色彩的像素分配相似视差来产生最终视差图。这里，一部分像素可对应于通过初始差值图未确定视差值的像素，并且最终视差图可包括所有像素的视差值。

所述约束可对应于硬约束，即，所述像素之中具有通过初始视差图确定的视差值的像素可在最终视差图中具有相同视差值。

产生单元可通过确定每个像素的视差值来产生最终视差图，以降低能量。

能量可根据第一像素的视差值与第一像素的相邻像素的色彩相似性加权视差值之间的差异的增加而增加。

第一像素可对应于所述像素之中的预定像素。

第一像素的相邻像素可对应于所述像素之中位于基于第一像素的坐标预定的范围内的像素。

所述约束可对应于软约束，即，所述能量可根据第二像素在初始视差图中的视差值与第二像素在最终视差图中的视差值之间的差异的增加而增加。

产生单元可将先前帧中的第四像素添加到当前帧中的第三像素的相邻像素。

第三像素在当前帧中的坐标可与第四像素在先前帧中的坐标相同。

当前帧可包括图像和初始视差图。

先前帧和当前帧可对应于时间上连续的帧。

产生单元可向视差值未确定的像素中的至少一个像素分配初始视差值。

产生单元可以按坡道的形式向视差值未确定的像素中的至少一个像素分配初始视差值。

图像处理设备可还包括解压缩单元，用于当图像和初始视差图已被压缩时，对图像和初始视差图进行解压缩。

由于作为压缩初始视差图的结果而丢失的初始视差图的数据，可产生视差值未确定的像素。

图像处理设备可还包括用于向上扩展图像和初始视差图的向上扩展单元。

上述和/或其他方面还通过提供一种图像处理方法来实现，所述方法包括：接收包括像素的色彩信息的图像和包括像素的视差信息的初始视差图；确定约束；通过在确定的约束下向所述像素之中的两个彼此相邻并具有相似色彩的像素分配相似视差来产生最终视差图。这里，一部分像素可对应于通过初始差值图未确定视差值的像素，并且最终视差图可包括所有像素的视差值。

上述和/或其他方面还通过提供一种图像处理设备来实现。所述设备包括：接收单元，用于接收包括像素的色彩信息的图像和包括像素的视差信息的初始视差图，其中，所述初始视差图中的像素中的至少一部分像素是具有未确定的视差值的视差未确定的像素；约束确定单元，用于确定约束；产生单元，用于通过在确定的约束下向所述像素之中的两个彼此相邻的像素分配相似视差来产生最终视差图，最终视差图包括每个像素的视差值。

当两个相邻像素中的一个像素是视差未确定的像素，并且所述两个相邻像素中的另一个像素具有确定的视差值并具有与视差值未确定的像素相似的色彩时，图像处理设备的产生单元可向所述两个相邻像素分配相似视差。

实施例的另外的方面将在以下的描述中部分地进行阐述，并将部分地通过所述描述而清楚，或可通过本公开的实践而被了解。

附图说明

从以下结合附图对实施例的描述，这些和/或其他方面将变得清楚和更易于理解，其中：

图1示出根据示例实施例的图像处理设备；

图2示出根据示例实施例的图像处理方法；