[发明专利]深度图获取方法、参考帧生成方法、编解码方法及设备

说明书

本公开关于一种深度图获取方法、参考帧生成方法、编解码方法及设备，该深度图获取方法包括：确定当前待生成深度图的目标视频帧；目标视频帧位于视频帧序列中且非视频帧序列中的首个视频帧，视频帧序列包括多个连续视频帧，各个视频帧的视频内容表征各视频帧之间存在相机运动且不存在场景切换；获取在视频帧序列中已确定的多个图像特征组；依据各个图像特征组获取目标视频帧对应的相机运动信息；基于相机运动信息计算得到目标视频帧的深度图。应用本公开的深度图获取方法，可以获取到目标视频帧的相机运动信息，进而依据相机运动信息计算得到目标视频帧的深度图，无需通过结构光摄像头采集深度图，降低了设备成本，提高了深度图的准确度。

技术领域

本公开涉及计算机应用技术领域，尤其涉及一种深度图获取方法、参考帧生成方法、编解码方法及设备。

背景技术

相关技术中，配备有结构光摄像头的电子设备，可以通过结构光摄像头采集到深度图，由于深度图的每个像素值都表明了场景中的物体表面到传感器的距离大小，因此深度图被广泛应用于多个领域当中，例如人机交互、三维场景重建、3D打印等领域中。

然而，结构光摄像头有成本高、功耗大，并且，在通过结构光摄像头在采集深度图的过程中，容易受外界环境因素影响，导致获取到的深度图的不准确。

发明内容

本公开提供一种深度图获取方法、参考帧生成方法、编解码方法及设备，以至少解决相关技术中获取深度图不准确的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种深度图获取方法，包括：

确定当前待生成深度图的目标视频帧；所述目标视频帧位于视频帧序列中且非所述视频帧序列中的首个视频帧，所述视频帧序列中包括多个连续视频帧，所述多个连续视频帧的视频内容表征所述多个连续视频帧之间存在相机运动且不存在场景切换；

在所述目标视频帧之前的各个视频帧中选取所述目标视频帧对应的前置视频帧；

获取在所述视频帧序列中已确定的多个图像特征组；

依据各个所述图像特征组，获取所述目标视频帧对应的相机运动信息，所述相机运动信息为所述目标视频帧的相机位姿相对于所述前置视频帧的相机位姿的变化量；

基于所述相机运动信息，计算得到所述目标视频帧的深度图。

可选的，在所述目标视频帧之前的各个视频帧中选取所述目标视频帧对应的前置视频帧，包括：

获取已设定的与所述目标视频帧对应的帧间距值；

依据所述帧间距值，在所述目标视频帧之前的各个视频帧中选取所述目标视频帧对应的前置视频帧。

可选的，所述多个图像特征组的确定过程，包括：

在所述视频帧序列中选取基准视频帧，以及所述基准视频帧对应的第一视频帧和第二视频帧，所述基准视频帧非所述视频帧序列的首个视频帧且非所述视频帧序列的末尾视频帧，所述第一视频帧和所述第二视频帧为所述视频帧序列中关于所述基准视频帧对称的两个视频帧；

在所述基准视频帧中确定多个基准图像块，对于每个所述基准图像块，所述第一视频帧中存在与该基准图像块匹配的第一图像块，且所述第二视频帧中存在与该基准图像块匹配的第二图像块；

在每个所述基准图像块所匹配的第一图像块中选取第一图像特征并在每个所述基准图像块所匹配的第二图像块中选取第二图像特征，并将所述第一图像特征与所述第二图像特征组成图像特征组；所述第一图像特征在所述第一匹配块中对应的空间位置与所述第二图像特征在所述第二匹配块中对应的空间位置相同。

可选的，依据各个所述图像特征组，获取所述目标视频帧对应的相机运动信息，包括：

在各个所述图像特征组中选取出部分图像特征组；