[发明专利]使用多视点图像的差异信息来估计图像运动的方法和装置

说明书

技术领域

该方法和装置涉及用于通过使用多视点图像(multi-view image)的差异(disparity)信息来估计和处理多视点图像的运动的方法和装置。

背景技术

用于生成两个图像之间的图像的多视点图像的运动估计可以通过估计两个连续图像之间的运动的方法或通过估计具有不同视角的两个图像之间的运动的方法来执行。后者可以通过获取差异信息来执行，而前者可以通过获取运动矢量来执行。

在这种情况下，当估计运动时，在两个连续图像之间(其中每个图像具有独立的视角)，各视角的运动估计值可能缺乏一致性。

发明内容

技术问题

该方法和装置提供用于通过使用多视点图像的差异信息来估计和处理多视点图像的运动的方法和装置。

有益效果

根据本发明构思的示例性实施例，当多视点图像处理装置通过在多视点图像的每个视角处获取两个连续图像之间的运动估计信息而额外生成两个连续图像之间的图像时，两个连续图像之间的运动估计信息可以通过考虑两个视角之间的差异来获取以便加强两个视角之间的暂时运动估计信息的一致性并且提高运动估计的性能。

附图说明

图1是根据本发明的实施例的描述处理多视点图像的方法的图；

图2是根据本发明构思的示例性实施例的图示处理多视点图像的方法的流程图；

图3a和3b是根据本发明构思的示例性实施例的描述处理多视点图像的方法的框图；

图4是图示根据本发明构思的示例性实施例的图3a和3b的方法的流程图；

图5是用于描述根据本发明构思的另一示例性实施例的处理多视点图像的方法的框图；

图6是图示根据本发明构思的另一示例性实施例的图5的方法的流程图；

图7a至8c是根据本发明构思的示例性实施例的多视点图像；

图9是根据本发明构思的另一示例性实施例的图示通过获取相应区域来处理多视点图像的方法的流程图；

图10是根据本发明构思的另一示例性实施例的图示通过获取相应区域来处理多视点图像的方法的流程图；以及

图11是根据本发明构思的示例性实施例的用于处理多视点图像的装置的框图。

具体实施方式

根据本发明构思的一方面，提供一种处理多视点图像的方法。所述方法包括：提取在第一视角的图像和第二视角的图像之间的差异信息；以及使用提取的差异信息来估计第一视角或第二视角的两个连续图像之间的运动。

所述估计可以包括：使用提取的差异信息来获取第一视角和第二视角的图像中的相应区域；估计第一视角和第二视角中的每一个的两个连续图像之间的相应区域的运动；以及使用在其它视角处估计的运动信息来补偿在第一视角和第二视角中的每一个处估计的运动信息。

所述估计可以包括：估计第一视角或第二视角的两个连续图像之间的运动；以及使用提取的差异信息来补偿第一视角或第二视角的两个连续图像之间的估计的运动信息。

所述估计可以包括：估计第一视角的两个连续图像之间的运动；以及使用提取的差异信息和在第一视角处估计的运动信息来估计第二视角的两个连续图像之间的运动。

所述提取可以包括同时提取第一视角和第二视角的两个图像之间的差异信息。

提取两个连续图像中的至少一个的时间可以等于或接近于提取差异信息的时间。

所述估计可以包括获取第一视角或第二视角的两个连续图像之间的运动矢量。

所述方法还可以包括基于估计的运动信息生成第一视角或第二视角的两个连续图像之间的图像。

示例性实施例可以提供一种用于处理多视点图像的装置，所述装置包括：处理器，其被配置为提取多视点图像中的第一视角的图像和第二视角的图像之间的差异信息，且还被配置为使用提取的差异信息来估计第一视角或第二视角的两个连续图像之间的运动。所述装置还可以包括存储多视点图像的存储器。

另一示例性实施例可以提供一种用于处理多视点图像的装置，所述装置包括：至少两个相机，每一个拍摄彼此间隔开且与相机间隔开的两个对象；以及处理器，其被配置为提取在该多视点图像中第一相机所拍摄的第一视角的图像和第二相机所拍摄的第二视角的图像之间的差异信息，且还被配置为使用提取的差异信息来估计第一视角或第二视角的两个连续图像之间的运动。