[发明专利]立体图像产生方法及使用此方法的电子装置

说明书

本发明提供一种立体图像产生方法及使用此方法的电子装置，此电子装置包括适于拍摄立体图像的第一相机与第二相机，且第一相机的解析度大于第二相机的解析度。此方法利用第一相机拍摄第一图像，并利用第二相机拍摄第二图像，接着将第二图像放大至第一相机的解析度，而利用第一图像与放大后的第二图像产生深度图。然后，参考此深度图，将第一图像重新投射以重建第二图像的参考图像。之后则检测参考图像中的遮蔽区域，并利用放大后的第二图像填补此遮蔽区域。最后产生包括第一图像及填补后的参考图像的立体图像。通过对低解析度相机及高解析度相机所拍摄图像进行处理，可产生高解析度的立体图像。

技术领域

本发明是有关于一种图像处理方法及装置，且特别是有关于一种立体图像产生方法及使用此方法的电子装置。

背景技术

随着图像获取技术的日益进步，数码相机的像素大幅增加，但相机尺寸则相对缩小，而可配置在手机、平板电脑等便携式电子装置上，让使用者能够随时随地拍摄图像。目前市面上有部分手机还配置有双镜头相机，通过双镜头相机拍摄左右不同视角的图像，可生成立体图像提供使用者观看。此外，根据左右图像中对应物件之间的视差，相机可进一步计算出图像中各个物件的深度信息，并应用于物件检测、景深调整、焦距切换等进阶功能，而增加相机的运用空间。

然而，在相机上配置规格相同的双镜头等同增加一倍的成本，此将使得配置双镜头相机的装置成本大幅增加。因此，如何能以最少的成本实现类似上述双镜头相机所提供的功能，实为本领域业者极欲解决的问题之一。

发明内容

本发明提供一种电子装置及其立体图像产生方法，通过对低解析度相机及高解析度相机所拍摄图像进行处理，可产生高解析度的立体图像。

本发明的立体图像产生方法适用于包括第一相机与第二相机的电子装置，其中第一相机与第二相机适于拍摄立体图像，且第一相机的解析度大于第二相机的解析度。此方法利用第一相机拍摄第一图像，并利用第二相机拍摄第二图像，并将第二图像放大(upscale)至第一相机的解析度，而利用第一图像与放大后的第二图像产生深度图。然后，参考此深度图，将第一图像重新投射以重建第二图像的参考图像。之后则检测参考图像中的遮蔽区域，并利用放大后的第二图像填补此遮蔽区域。最后产生包括第一图像及填补后的参考图像的立体图像。

在本发明的一实施例中，上述参考深度图，将该第一图像重新投射以重建第二图像的参考图像的步骤还包括参考深度图中的深度信息及第一相机与第二相机之间的基线(baseline)距离，计算第一图像与第二图像的参考图像之间的视差信息，而根据此视差信息获取重新投射于三维空间中的第一图像的图像数据，以作为第二图像的参考图像。

在本发明的一实施例中，上述参考深度图，将第一图像重新投射以重建第二图像的参考图像的步骤还包括检测电子装置的使用者的两眼距离，而根据两眼距离及第一相机与第二相机之间的基线距离，计算基线距离调整值，然后参考深度图及此基线距离调整值，将第一图像重新投射以重建第二图像的参考图像，使得参考图像与第一图像之间的视差信息符合所述两眼距离。

在本发明的一实施例中，上述参考深度图及基线距离调整值，重新投射第一图像以重建第二图像的参考图像的步骤包括根据基线距离调整值，调整第二相机的位置并计算调整后的位置坐标，获取深度图中的深度信息，并转换深度信息的坐标至世界坐标系(world coordinate system)，以及根据转换后的深度信息及第二相机的调整后的位置坐标，将第一图像重新投射以重建第二图像的参考图像。

在本发明的一实施例中，上述检测参考图像中的遮蔽区域的步骤包括将参考图像与放大后该第二图像进行匹配，并取参考图像中未与第二图像匹配的区域作为遮蔽区域。

在本发明的一实施例中，上述检测参考图像中的遮蔽区域的步骤包括将检测参考图像中的空白区域以作为遮蔽区域。