[发明专利]图像处理方法、装置、电子设备、存储介质和程序

说明书

本实施例公开了一种图像处理方法、装置、电子设备和计算机存储介质，该方法包括：获取待处理图像与参考图像，其中，参考图像的分辨率高于待处理图像的分辨率；利用第一对比关系网络对待处理图像与参考图像进行处理，得到待处理图像与参考图像中像素点之间的第一对应关系；第一对比关系网络是基于第一样本图像的特征和样本参考图像的特征之间的第一关系以及第二样本图像，进行有监督训练得出的；根据第一对应关系，将参考图像的特征融合至待处理图像中，得到待处理图像的超分辨率图像。

技术领域

本公开涉及计算机视觉处理技术，尤其涉及一种图像处理方法、装置、电子设备、计算机存储介质和计算机程序。

背景技术

在相关技术中，基于参考的图像超分辨率(Reference-based Super-Resolution，Ref-SR)技术引起了广泛关注。与输入为单幅低分辨率图像的单图像超分辨率相比，基于参考的图像超分辨率技术利用了一张额外的高分辨率图像作为参考图像，对给定的低分辨率图像进行超分辨率处理，得到超分辨率图像，在超分辨率处理的过程中，参考图像可以为超分辨率处理过程提供更多图像细节的参考。

基于参考的图像超分辨率技术的关键在于查找低分辨率图像和参考图像的像素点之间的对应关系，然而，由于低分辨率图像和参考图像之间的分辨率差距，导致难以准确地查找到低分辨率图像和参考图像的像素点之间的对应关系，从而会影响到生成的超分辨率图像的质量。

发明内容

本公开实施例提供一种图像处理的技术方案。

本公开实施例提供了一种图像处理方法，所述方法包括：

获取待处理图像与参考图像，其中，所述参考图像的分辨率高于所述待处理图像的分辨率；

利用第一对比关系网络对所述待处理图像与所述参考图像进行处理，得到所述待处理图像与所述参考图像中像素点之间的第一对应关系；所述第一对比关系网络是基于第一样本图像的特征和样本参考图像的特征之间的第一关系以及第二样本图像，进行有监督训练得出的，所述第一样本图像的特征和所述样本参考图像的特征是基于训练完成的第二对比关系网络得出的数据；所述第一样本图像和所述样本参考图像的分辨率均高于所述第二样本图像的分辨率；

根据所述第一对应关系，将所述参考图像的特征融合至所述待处理图像中，得到所述待处理图像的超分辨率图像。

在一些实施例中，所述第一对比关系网络的训练过程包括：

确定所述第二样本图像的特征和所述样本参考图像的特征之间的第二关系；

根据所述第一关系和所述第二关系，调整所述第一对比关系网络的网络参数值。

在一些实施例中，所述第一关系用于表征所述第一样本图像和所述样本参考图像中特征之间的相关性数据，所述第二关系用于表征所述第二样本图像和所述样本参考图像中特征之间的相关性数据；

所述根据所述第一关系和所述第二关系，调整所述第一对比关系网络的网络参数值，包括：

根据所述第一关系以及所述第二关系，确定所述第一对比关系网络的损失；根据所述第一对比关系网络的损失调整所述第一对比关系网络的网络参数值；所述第一对比关系网络的损失包括相关性损失，所述相关性损失表示所述第一关系和所述第二关系之间的差异。

在一些实施例中，所述第二关系还用于表征所述第二样本图像中像素点的特征和所述样本参考图像中像素点的特征之间的距离信息；

所述根据所述第一关系以及所述第二关系，确定所述第一对比关系网络的损失，包括：

根据所述第二关系表征的所述距离信息，确定三元组损失；根据所述第一关系、所述第二关系以及所述三元组损失，确定所述第一对比关系网络的损失，所述第一对比关系网络的损失还包括所述三元组损失。