[发明专利]图像处理方法、装置、存储介质、计算机程序和电子设备

说明书

本发明实施例提供了一种图像处理方法、装置、存储介质、计算机程序和电子设备。其中，图像处理方法包括：对待处理图像的第一特征进行上采样操作，得到第二特征，所述第一特征为所述待处理图像经卷积特征提取得到；根据所述第二特征分别进行N次重建操作，其中，非首次的重建操作需要基于上一次重建操作的重建数据进行，所述N为大于1的整数；基于最后一次重建操作的输出结果生成所述待处理图像的高分辨率图像。采用本发明实施例的技术方案，可以避免图像超分辨率处理过程中图像细节丢失或者失真的问题，提高图像超分辨率效果。

技术领域

本发明实施例涉及人工智能技术领域，尤其涉及一种图像处理方法、装置、存储介质、计算机程序和电子设备。

背景技术

图像超分辨率是指由一幅低分辨率图像或图像序列转换成高分辨率图像，也称为图像上采样技术。对于一些低成本的成像传感器，采用图像超分辨率技术可以克服成像传感器固有的分辨率限制，将成像传感器生成的低分辨率图像转化成高分辨率图像，有利于进行图像分析，可应用在医学、监视、卫星等领域。

发明内容

本发明实施例提供了一种图像超分辨率的技术方案。

根据本发明实施例的第一方面，提供了一种图像处理方法，包括：对待处理图像的第一特征进行上采样操作，得到第二特征，所述第一特征为所述待处理图像经卷积特征提取得到；根据所述第二特征分别进行N次重建操作，其中，非首次的重建操作需要基于上一次重建操作的重建数据进行，所述N为大于1的整数；基于最后一次重建操作的输出结果生成所述待处理图像的高分辨率图像。

可选地，所述重建数据包括当前次重建操作输出的重建图像，和/或当前次重建操作得到的重建图像的偏导数图像。

可选地，所述N次重建操作对应的所述偏导数图像的阶数顺序降低。

可选地，所述偏导数图像为对应的所述重建图像在水平方向和垂直方向的偏导数图像。

可选地，所述对待处理图像的第一特征进行上采样操作，得到第二特征，包括：通过N组向后卷积滤波器对所述第一特征进行上采样操作，分别得到N组第二特征；所述根据所述第二特征分别进行N次重建操作，包括：分别根据所述N组第二特征分别进行N次重建操作。

可选地，所述根据所述第二特征分别进行N次重建操作，包括：通过深度神经网络的重建子网络根据所述第二特征分别进行N次重建操作，其中，所述重建子网络包括N个子分支网络，所述N个子分支网络分别根据第二特征进行重建操作。

可选地，所述方法还包括：提取所述待处理图像的低频分量；所述基于最后一次重建操作的输出结果生成所述待处理图像的高分辨率图像，包括：基于最后一次重建操作的输出结果和提取的所述低频分量，生成高分辨率图像。

可选地，所述方法还包括：提取所述待处理图像的低频分量；所述基于最后一次重建操作的输出结果生成所述待处理图像的高分辨率图像，包括：所述最后一次重建操作的输出结果为所述待处理图像的第三特征；所述第三特征进行上采样操作，得到第四特征；根据所述第四特征分别进行M次重建操作，其中，非首次的重建操作需要基于上一次重建操作的重建数据进行，所述M为大于1的整数；根据所述M次重建操作的输出结果，以及提取到的所述低频分量，生成高分辨率图像。

根据本发明实施例的第二方面，提供了一种图像处理装置，包括：上采样模块，用于对待处理图像的第一特征进行上采样操作，得到第二特征，所述第一特征为所述待处理图像经卷积特征提取得到；重建模块，用于根据所述第二特征分别进行N次重建操作，其中，非首次的重建操作需要基于上一次重建操作的重建数据进行，所述N为大于1的整数；生成模块，用于基于最后一次重建操作的输出结果生成所述待处理图像的高分辨率图像。

可选地，所述重建数据包括当前次重建操作输出的重建图像，和/或当前次重建操作得到的重建图像的偏导数图像。

可选地，所述N次重建操作对应的所述偏导数图像的阶数顺序降低。