[发明专利]深度图像像素增强方法、装置及计算机可读存储介质

权利要求书

1.一种深度图像像素增强方法，其特征在于，所述方法包括：

获取待处理图像和彩色引导图像；其中，所述彩色引导图像为所述待处理图像的彩色图像，且所述彩色引导图像的分辨率高于所述待处理图像；

对所述待处理图像进行预处理，以得到预处理图像；

将彩色引导图像输入引导卷积网络，以得到第一特征图像；

将所述预处理图像输入目标卷积网络，以得到第二特征图像；

基于所述第一特征图像、所述第二特征图像以及待处理图像，得到像素增强后的图像。

2.根据权利要求1所述的方法，其特征在于，所述对所述待处理图像进行预处理，以得到预处理图像，包括：

确定所述彩色引导图像的分辨率；

对所述待处理图像进行双三次插值，以得到与所述彩色引导图像的分辨率相同的预处理图像。

3.根据权利要求1所述的方法，其特征在于，所述基于所述第一特征图像、所述第二特征图像以及待处理图像，得到像素增强后的图像，包括：

将所述第一特征图像和第二特征图像输入预测网络，输出预测图像；

基于所述预测图像和所述待处理图像，得到像素增强后的图像。

4.根据权利要求3所述的方法，其特征在于，所述预测网络包括像素自适应卷积模块，所述将所述第一特征图像和第二特征图像输入预测网络，输出预测图像，包括：

根据第一特征图像计算所述像素自适应卷积模块的自适应卷积核；

利用所述自适应卷积核和所述目标卷积网络最后一层的权重矩阵对所述第二特征图像进行加权处理，并对加权结果添加偏置项，以得到所述预测图像。

5.根据权利要求3所述的方法，其特征在于，所述基于所述预测图像和所述待处理图像，得到像素增强后的图像，包括：

将所述待处理图像各像素点的像素值加上所述预测图像中相应像素点的像素值的预设倍数，以得到所述像素增强后的图像。

6.根据权利要求5所述的方法，其特征在于，所述预设倍数在0.8～1.2倍之间。

7.一种深度图像像素增强装置，其特征在于，所述装置包括：

获取模块，用于获取待处理图像和彩色引导图像；其中，所述彩色引导图像为所述待处理图像的彩色图像，且所述彩色引导图像的分辨率高于所述待处理图像；

预处理模块，用于对待处理图像进行预处理，以得到预处理图像；

特征提取模块，用于将所述预处理图像输入目标卷积网络，以得到第一特征图像，并将彩色引导图像输入引导卷积网络，以得到第二特征图像；

像素增强模块，用于基于所述第一特征图像、第二特征图像以及待处理图像，得到像素增强后的图像。

8.根据权利要求7所述的装置，其特征在于，所述预处理模块还用于确定所述彩色引导图像的分辨率，并对所述待处理图像进行双三次插值，以得到与所述彩色引导图像的分辨率相同的预处理图像。

9.一种深度图像像素增强装置，其特征在于，所述深度图像像素增强装置包括相互耦接的处理器和存储器；所述存储器中存储有计算机程序，所述处理器用于执行所述计算机程序以实现如权利要求1-6中任一项所述方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有程序数据，所述程序数据被处理器执行时实现如权利要求1-6中任一项所述方法的步骤。