[发明专利]图像特征处理、深度图像生成方法及装置、介质和设备

说明书

本公开提供了一种图像特征处理方法、深度图像生成方法、图像特征处理装置、深度图像生成装置、计算机可读存储介质和电子设备，涉及图像处理技术领域。该图像特征处理方法包括：获取待处理的图像特征图；从待处理的图像特征图中提取位置编码信息；利用位置编码信息对待处理的图像特征图进行特征转换，得到处理后的图像特征图。本公开可以准确地得到与待处理的图像特征图对应的位置编码，输出精确度高的特征图，有助于提升模型预测结果的准确度。

技术领域

本公开涉及图像处理技术领域，具体而言，涉及一种图像特征处理方法、深度图像生成方法、图像特征处理装置、深度图像生成装置、计算机可读存储介质和电子设备。

背景技术

与全卷积网络(Fully Convolution Network，FCN)相比，Transformer(变换器)能够更好地建模长距离依赖关系，这就使得Transformer在一些应用场景中更具优势。

位置编码(Positional Embedding，PE)为视觉Transformer中的可学习参数，可用作坐标索引，在空间信息建模中起着重要的作用，有助于Transformer正确地学习到要素之间的关系。

然而，目前应用Transformer的方案，仍会存在预测结果准确度不高的问题。

发明内容

本公开提供一种图像特征处理方法、深度图像生成方法、图像特征处理装置、深度图像生成装置、计算机可读存储介质和电子设备，进而至少在一定程度上克服模型处理结果准确度不高的问题。

根据本公开的第一方面，提供了一种图像特征处理方法，包括：获取待处理的图像特征图；从待处理的图像特征图中提取位置编码信息；利用位置编码信息对待处理的图像特征图进行特征转换，得到处理后的图像特征图。

根据本公开的第二方面，提供了一种深度图像生成方法，包括：获取彩色图以及与彩色图对应的稀疏深度图，并将彩色图与稀疏深度图进行合并，生成待处理图像；对待处理图像进行下采样，得到待处理的图像特征图，并利用上述图像特征处理方法对待处理的图像特征图进行处理，生成处理后的图像特征图；对处理后的图像特征图进行上采样，得到深度估计信息；利用深度估计信息，生成与彩色图对应的稠密深度图。

根据本公开的第三方面，提供了一种图像特征处理装置，包括：特征获取模块，用于获取待处理的图像特征图；信息提取模块，用于从待处理的图像特征图中提取位置编码信息；特征转换模块，用于利用位置编码信息对待处理的图像特征图进行特征转换，得到处理后的图像特征图。

根据本公开的第四方面，提供了一种深度图像生成装置，包括：图像获取模块，用于获取彩色图以及与彩色图对应的稀疏深度图，并将彩色图与稀疏深度图进行合并，生成待处理图像；特征处理模块，用于对待处理图像进行下采样，得到待处理的图像特征图，并利用上述图像特征处理方法，对待处理的图像特征图进行处理，生成处理后的图像特征图；上采样模块，用于对处理后的图像特征图进行上采样，得到深度估计信息；深度图生成模块，用于利用深度估计信息，生成与彩色图对应的稠密深度图。

根据本公开的第五方面，提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述的图像特征处理方法或深度图像生成方法。

根据本公开的第六方面，提供了一种电子设备，包括处理器；存储器，用于存储一个或多个程序，当一个或多个程序被处理器执行时，使得所述处理器实现上述的图像特征处理方法或深度图像生成方法。