[发明专利]位姿检测方法及装置、电子设备和存储介质

说明书

本公开涉及一种位姿检测方法及装置、电子设备和存储介质，所述方法包括：获取待处理的至少一帧第一图像，该第一图像包括图像采集设备采集的目标对象背面的二维图像，根据至少一帧第一图像，以及预设的目标对象正面的三维点云，确定所述第一图像中目标对象的位姿信息。本公开实施例不仅能准确实现背对相机拍摄的单帧图像的位姿，还能准确实现背对相机阵列设备拍摄的多帧图像的位姿，有效解决目标对象全方位的位姿检测，不管目标对象的面部朝向与拍摄方向的角度呈现什么角度，均能实现准确地位姿检测。

技术领域

本公开涉及计算机技术领域，尤其涉及一种位姿检测方法及装置、电子设备和存储介质。

背景技术

基于图像的目标三维重建已经成为十分流行的研究方向，并且在目标的检测与识别、目标驱动、增强现实等方向得到广泛应用，与之对应的，求解目标对象的三维模型和二维图像间的相对位姿(Pose)，也形成了一套比较成熟的逻辑方案。

但是，在对目标对象进行三维重建的过程中，当目标对象背对镜头，由于目标对象背面没有明确的语义部位，例如，以人头三维重建为例，当人头后脑勺的区域朝向镜头时，后脑勺上没有例如眼角、嘴角、鼻尖等拥有明确语义的部位，所以，在进行目标对象的三维模型(人头三维模型)相对于背面二维图像(例如后脑勺图像)的位姿检测时会遇到较大的困难。

发明内容

本公开提出了一种位姿检测技术方案。

根据本公开的一方面，提供了一种位姿检测方法，包括：获取待处理的至少一帧第一图像，所述第一图像包括图像采集设备采集的目标对象背面的二维图像；根据所述至少一帧第一图像，以及预设点云，确定所述第一图像中目标对象的位姿信息，其中，所述预设点云为目标对象正面的三维点云。

在一种可能的实现方式中，所述预设点云包括N个预设关键点，N为大于1的整数，在图像采集设备为单相机的情况下，所述至少一帧第一图像包括所述单相机拍摄的单帧第一图像；所述根据所述至少一帧第一图像，以及预设点云，确定所述第一图像中目标对象的位姿信息，包括：在所述单帧第一图像的目标对象区域，生成包含N个第一关键点的标注信息；将所述预设点云投影至所述单帧第一图像，确定N个第一关键点对应的N个第一投影点；对所述N个第一投影点与所述N个预设关键点进行拟合处理，得到所述单帧第一图像中目标对象的位姿信息。

在一种可能的实现方式中，在图像采集设备为相机阵列的情况下，所述至少一帧第一图像包括：多帧第一图像以及多帧第二图像，所述第二图像为目标对象正面的二维图像；所述根据所述至少一帧第一图像，以及预设点云，确定所述第一图像中目标对象的位姿信息，包括：对所述多帧第二图像进行三维重建，得到所述预设点云，以及对所述多帧第一图像进行三维重建，得到第一点云；根据所述预设点云和所述第一点云的相对关系，确定所述多帧第一图像中每帧第一图像中目标对象的位姿信息。

在一种可能的实现方式中，在图像采集设备为相机阵列的情况下，在所述获取待处理的至少一帧第一图像之前，包括：根据所述相机阵列采集的棋盘格图像，标定相机阵列的内参数和外参数，所述内参数包括焦距和/或像素大小，所述外参数包括相机位置和/或相机旋转角度；所述对所述多帧第二图像进行三维重建，得到所述预设点云，包括：根据所述内参数和所述外参数，对所述多帧第二图像进行三维重建，得到所述预设点云；以及，所述对所述多帧第一图像进行三维重建，得到第一点云，包括：根据所述内参数和所述外参数，对所述多帧第一图像进行三维重建，得到所述第一点云。

在一种可能的实现方式中，所述预设点云和所述第一点云的相对关系包括所述预设点云与所述第一点云之间的位姿变换信息，所述根据所述预设点云和所述第一点云的相对关系，确定所述多帧第一图像中每帧第一图像中目标对象的位姿信息，包括：根据相机阵列的内参数和外参数、确定所述预设点云与所述第一点云之间的位姿变换信息，确定所述预设点云与每帧第一图像之间的位姿变换信息；根据所述预设点云与每帧第一图像之间的位姿变换信息，确定所述多帧第一图像中每帧第一图像中目标对象的位姿信息。