[发明专利]深度图像像素增强方法、装置及计算机可读存储介质

说明书

本申请公开了一种深度图像像素增强方法、装置及计算机可读存储介质。该方法包括：获取待处理图像和彩色引导图像；其中，所述彩色引导图像为所述待处理图像的彩色图像，且所述彩色引导图像的分辨率高于所述待处理图像；对所述待处理图像进行预处理，以得到预处理图像；将所述预处理图像输入目标卷积网络，以得到第一特征图像；将彩色引导图像输入引导卷积网络，以得到第二特征图像；基于所述第一特征图像、所述第二特征图像以及待处理图像，得到像素增强后的图像。通过上述方式，本申请能够对低分辨率的图像进行像素增强，提高图像质量。

技术领域

本申请涉及图像处理领域，特别是涉及深度图像像素增强方法、装置及计算机可读存储介质。

背景技术

随着传感器技术的飞速发展，深度相机在自动驾驶、三维重建等方面都有着重要的应用。但是，低成本深度相机获得的深度图像都具有分辨率低、图像噪声过大的问题，这些深度图像在实际应用中有较大困难。

发明内容

本申请主要提供一种深度图像像素增强方法、装置及计算机可读存储介质，解决了现有技术中难以对低分辨率图像进行分辨率增强的问题。

为解决上述技术问题，本申请第一方面提供了一种深度图像像素增强方法，包括：获取待处理图像和彩色引导图像；其中，所述彩色引导图像为所述待处理图像的彩色图像，且所述彩色引导图像的分辨率高于所述待处理图像；对所述待处理图像进行预处理，以得到预处理图像；将所述预处理图像输入目标卷积网络，以得到第一特征图像；将彩色引导图像输入引导卷积网络，以得到第二特征图像；基于所述第一特征图像、所述第二特征图像以及待处理图像，得到像素增强后的图像。

为解决上述技术问题，本申请第二方面提供了深度图像像素增强装置，包括：获取模块，用于获取待处理图像和彩色引导图像；其中，所述彩色引导图像为所述待处理图像的彩色图像，且所述彩色引导图像的分辨率高于所述待处理图像；预处理模块，用于对待处理图像进行预处理，以得到预处理图像；特征提取模块，用于将所述预处理图像输入目标卷积网络，以得到第一特征图像，并将彩色引导图像输入引导卷积网络，以得到第二特征图像；像素增强模块，用于基于所述第一特征图像、第二特征图像以及待处理图像，得到像素增强后的图像。

为解决上述技术问题，本申请第三方面提供了一种深度图像像素增强装置，所述深度图像像素增强装置包括相互耦接的处理器和存储器；所述存储器中存储有计算机程序，所述处理器用于执行所述计算机程序以实现如上述第一方面提供的深度图像像素增强方法。

为解决上述技术问题，本申请第四方面提供了一种计算机可读存储介质，计算机可读存储介质存储有程序数据，所述程序数据被处理器执行时，实现上述第一方面提供的深度图像像素增强方法。

本申请的有益效果是：区别于现有技术的情况，本申请首先获取待处理图像和彩色引导图像，其中，彩色引导图像为待处理图像的彩色图像，且彩色引导图像的分辨率高于待处理图像，对待处理图像进行预处理，以得到预处理图像，将预处理图像输入目标卷积网络，以得到第一特征图像，将彩色引导图像输入引导卷积网络，以得到第二特征图像，基于第一特征图像、第二特征图像以及待处理图像，得到像素增强后的图像。本申请提供待处理图像的高分辨率彩色图像，并利用引导卷积网络和目标卷积网络分别对高分辨率的彩色图像和待处理图像进行特征提取，进而根据引导卷积网络和目标卷积网络输出的特征图像对待处理图像进行像素增强，能够有效提高待处理图像的分辨率，处理效果好。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请深度图像像素增强方法一实施例的流程示意框图；

图2是本申请深度图像像素增强网络一实施例的结构示意图；