[发明专利]图像处理方法和双摄像头系统

说明书

本发明实施例提供了一种图像处理方法及装置，该方法包括：获取同一时刻待拍摄场景通过双摄像头系统中的第一摄像头形成的第一图像中的关键点描述子构成的第一集合，以及所述待拍摄场景通过所述双摄像头系统中的第二摄像头形成的第二图像中的关键点描述子构成的第二集合；基于关键点描述子的相似性，将该第一集合和该第二集合中相匹配的关键点配对成关键点对；根据该第一图像和该第二图像的深度信息选择符合预定条件的该关键点对；根据选择的该关键点对生成图像对齐向量场，该图像对齐向量场是由该第一图像的像素点相对该第二图像对应的像素点的图像对齐向量构成的向量场；根据该第一图像和该第二图像的深度信息估算该第一图像和该第二图像中的遮挡区域，并消除该遮挡区域在该图像对齐向量场中的对齐向量，形成修正后的图像对齐向量场。

技术领域

本发明涉及图像处理领域，并且更具体地，涉及图像处理方法和双摄像头系统。

背景技术

随着用户对移动设备成像功能需求的提高，作为能改善手机摄像头聚焦功能和成像画质的双摄像头成像技术，已经越来越引起众多手机厂商的重视。通过不同的双摄像头硬件配置，不仅可以以非数码变焦的方式拍摄距离较远的物体，改善低光成像性能和运动模糊性能，还具有分析判断场景景深的能力，以实现背景虚化和自动对焦功能。

高动态范围图像(High-Dynamic Range，简称HDR)和超分辨率作为双摄像头成像的一项重要功能，其必不可少的技术步骤是双摄像头图像之间的对齐和配准。由于双摄像头视角差异，势必造成两幅图像成像内容的差异，部分区域在两幅图像中并非都可见，这些区域可定义为遮挡区域，通常出现在前景与背景的交界处。在两幅图像的对齐过程中，由于单幅图像的遮挡区域在另外一幅图像中找不到相匹配区域，强行对这些区域执行HDR和超分辨率操作会引起图像混叠和模糊，降低双摄像头成像质量。

发明内容

本发明实施例提供一种图像处理方法和双摄像头系统，能够提高双摄像头成像的质量。

第一方面，提供了一种图像处理方法，该方法包括：获取同一时刻待拍摄场景通过双摄像头系统中的第一摄像头形成的第一图像中的关键点描述子构成的第一集合，以及该待拍摄场景通过该双摄像头系统中的第二摄像头形成的第二图像中的关键点描述子构成的第二集合；基于关键点描述子的相似性，将该第一集合和该第二集合中相匹配的关键点配对成关键点对，其中，该第一集合中配对的关键点与该第二集合中配对的关键点一一对应，每个该关键点对包含该第一集合中的一个关键点及其在该第二集合中相匹配的关键点；根据该第一图像和该第二图像的深度信息选择符合预定条件的该关键点对，其中，该第一图像和该第二图像的深度信息用于描述该第一图像和该第二图像中的像素点在该待拍摄场景对应的空间位置的深度；根据选择的该关键点对生成图像对齐向量场，该图像对齐向量场是由该第一图像的像素点相对于该第二图像对应的像素点的图像对齐向量构成的向量场，其中，该第一图像的第一像素点相对于该第二图像的第二像素点的图像对齐向量为该第二像素点的坐标减去该第一像素点的坐标后得到的向量；根据该第一图像和该第二图像的深度信息估算该第一图像和该第二图像中的遮挡区域，并消除该遮挡区域在该图像对齐向量场中的对齐向量，形成修正后的图像对齐向量场，其中，该第一图像的遮挡区域的图像在该第二图像中不可见，该第二图像的遮挡区域的图像在该第一图像中不可见。

结合第一方面，在第一种可能的实现方式中，该第一图像和该第二图像的深度信息包括该第一图像的第一类区域和第二类区域的信息，以及该第二图像的第一类区域和第二类区域的信息，其中，该第一类区域为像素点的深度大于或等于预定阈值的区域，该第二类区域为像素点的深度小于预定阈值的区域；该预定条件为：该关键点对中属于该第一图像的关键点位于该第一图像的第一类区域，且属于该第二图像的关键点位于该第二图像的第一类区域，或者该关键点对中属于该第一图像的关键点位于该第一图像的第二类区域，且属于该第二图像的关键点位于该第二图像的第二类区域，则选择该关键点对。