[发明专利]图像的校准方法、装置、存储介质、程序产品和电子设备

说明书

本发明实施例提供一种图像的校准方法、装置、存储介质、程序产品和电子设备，涉及图像处理领域。其中，所述方法包括：获取第一图像和第二图像中匹配的多对关键点，所述第一图像与所述第二图像为立体图像对；根据所述多对关键点中关键点的位置数据，确定用于所述第二图像中像素点位置变换的第一变换数据；根据所述第一变换数据对所述第二图像中像素点的位置进行变换，使得所述第二图像中的像素点分别与所述第一图像中对应的像素点对齐。通过本发明实施例，使得在维持图像校准的稳定性的同时，还提高了图像校准的准确度。

技术领域

本发明实施例涉及图像处理领域，尤其涉及一种图像的校准方法、装置、存储介质、程序产品和电子设备。

背景技术

随着双镜头相机模块的快速发展，表示捕获的场景的第三维的深度信息可用于智能手机。目前，可利用立体匹配技术依据具有双摄像头的智能手机获得的主图像和辅图像估算得到深度信息。景深渲染是基于深度信息应用的趋势之一。作为最典型应用的大光圈浅景深已经成功应用于多款具有双摄像头的智能手机上。为了在双摄智能手机上实现深度估计的快速运算，需要对智能手机的两个摄像头分别获得的主图像和辅图像进行校准。校准的目的是使两幅图像的对应像素点处于图像上的同一条水平线上，这样立体匹配的搜索范围就由未校准前的二维搜索变成校准后的一维搜索，从而大大减少了立体匹配的计算量。

在现有技术中，图像校准是将一对投影变换应用到一对对极几何已知的的图像的过程，这样原始图像中的对极线可水平映射至变换图像中的对齐线。然而，为了获得对极几何，现有的图像校准方法要求对双摄智能手机进行线下标定或线上标定。虽然使用双摄智能手机捕获立体图像是很容易的，但是标定它们是很麻烦的。具体地，在出厂前对每部双摄智能手机都标定一次。此外，双摄智能手机出厂后两个摄像头不可避免地发生一些轻微的偏移，导致使用事先的标定数据的校准效果下降，甚至事先标定的数据完全不可用。如果智能手机的摄像头是变焦镜头，一旦在实际使用时摄像头的焦距相对标定的焦距发生了变化，直接使用事先标定的数据也不能达到很好的校准效果。

发明内容

本发明实施例的目的在于，提供一种图像校准的技术方案。

根据本发明实施例的第一方面，提供了一种图像的校准方法。所述方法包括：获取第一图像和第二图像中匹配的多对关键点，所述第一图像与所述第二图像为立体图像对；根据所述多对关键点中关键点的位置数据，确定用于所述第二图像中像素点位置变换的第一变换数据；根据所述第一变换数据对所述第二图像中像素点的位置进行变换，使得所述第二图像中的像素点分别与所述第一图像中对应的像素点对齐。

可选地，所述获取第一图像和第二图像中匹配的多对关键点，包括：对所述第一图像和所述第二图像分别进行特征提取，获得所述第一图像的多个关键点和所述第二图像的多个关键点；根据所述第一图像和所述第二图像中的关键点的特征向量对所述第一图像的多个关键点与所述第二图像的多个关键点进行匹配，获得所述第一图像和所述第二图像中匹配的多对关键点。

可选地，所述根据所述多对关键点中关键点的位置数据，确定用于所述第二图像中像素点位置变换的第一变换数据，包括：迭代地执行以下步骤t次：在所述多对关键点中随机选择n对关键点，并根据所述n对关键点中关键点的位置数据，确定用于所述第二图像中匹配关键点位置变换的第二变换数据；根据所述第二变换数据对所述第二图像中匹配关键点的位置进行变换，获得所述第二图像中的匹配关键点变换后的位置数据；确定所述第二图像中每个匹配关键点变换后的位置数据分别与所述第一图像中对应的匹配关键点的位置数据的差值的绝对值；确定所述第二图像中所述差值的绝对值小于预设阈值的匹配关键点的数量与所述第二图像中匹配关键点的数量的比值；根据每次迭代获得的比值确定最大比值，并将获得最大比值的迭代中的第二变换数据确定为所述第一变换数据，其中，t和n均为常数。