[发明专利]一种图像融合方法及设备

说明书

本发明适用于图像处理技术领域，提供了一种图像融合方法及设备，包括：获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。上述技术方案，通过端到端的神经网络模型将黑白加彩色双摄图像融合得到增强后的融合图像，无需进行像素级的精准对齐就可生成融合图像，有效避免传统融合方法存在的重影问题，实现良好的图像融合效果。

技术领域

本发明属于图像处理技术领域，尤其涉及一种图像融合方法及设备。

背景技术

自功能机时代开始，拍照就成为手机中的常用功能。随着智能手机的普及，手机摄像头的应用越来越广泛，手机拍照功能也越发优异。优异的拍照性能已成为智能手机的一大卖点，围绕拍照功能的技术创新层次不穷，光圈和传感器尺寸也越来越大，这些技术和硬件的升级对手机拍照无论是照片质量还是整体体验都有非常大的提升。在追求照片质量的同时，手机机身的轻薄化也是手机发展的一大趋势，现有技术在手机上采用了双摄像头模组，提高了拍摄照片的质量同时也满足了手机机身轻薄化的需求。

然而，直接使用双摄像头获得的是两张不同的图像，因此，还需要利用图像融合算法将两张双摄图像进行融合，才能得到最终的双摄增强图像。现有的图像融合是将多源信道所采集到的关于同一目标的图像数据经过图像处理计算机技术等，最大限度的提取各自信道中的有利信息，最后综合成高质量的图像，以提高图像信息的利用率。当前图像融合的前提条件是待融合的多源图像已经逐像素精准对齐，以确保多源图像逐像素对齐，即每个像素点对应的成像位置相同。

然而由于手机双摄的特殊应用场景，双摄图像仅仅能够进行整体的校准对齐，很难实现逐像素的精准对齐，这就导致传统方法很难实现好的双摄图像融合效果，融合结果中易出现重影等问题，严重影响融合效果。

发明内容

有鉴于此，本发明实施例提供了一种图像融合及设备，以解决现有技术中双摄图像融合效果差，融合结果中易出现重影的问题。

本发明实施例的第一方面提供了一种图像融合方法，包括：

获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；

将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；其中，所述图像融合模型由样本图像集训练得到，所述样本图像集包括多个样本图像组，所述样本图像组包括同一场景对应的样本黑白源图像、样本彩色源图像和样本彩色参照图像，在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。

本发明实施例的第二方面提供了一种图像融合装置，包括：

第一获取单元，用于获取待处理的目标源图像；所述目标源图像包括同一场景对应的待处理的目标黑白源图像和待处理的目标彩色源图像；

处理单元，用于将所述目标源图像输入到预设的图像融合模型进行处理，得到由所述目标黑白源图像和所述目标彩色源图像融合成的目标彩色图像；其中，所述图像融合模型由样本图像集训练得到，所述样本图像集包括多个样本图像组，所述样本图像组包括同一场景对应的样本黑白源图像、样本彩色源图像和样本彩色参照图像，在训练过程中，所述图像融合模型的输入为所述样本图像组，所述图像融合模型的输出为由所述样本黑白源图像和所述样本彩色源图像融合成的彩色图像。

本发明实施例的第三方面提供了一种图像融合设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的图像融合方法的步骤。