[发明专利]一种基于混合摄像机的室内场景定位方法

说明书

技术领域

本发明属于室内场景定位技术领域，具体涉及一种基于混合摄像机的室内场景定位方法。

背景技术

随着数字图像数据的快速增长，让计算机自动理解图像成为越来越迫切的需求，作为图像理解的重要研究内容，场景定位得到了广泛关注，是当前计算机视觉领域的研究热点。目前主流的场景定位方法大多是基于彩色图像的。

基于彩色图像的场景定位方法大体可以分为两类：第一类是基于稀疏特征点匹配的场景定位方法。该类算法采用的策略是在相机正常追踪时，从场景图像中提取一定数量的关键点，对这些关键点进行特征描述，然后将这些关键点的特征算子连同它们对应的三维坐标存储到特征点数据库中。当需要进行场景定位时，就从相机捕获的当前图像中提取特征点，和已有特征点数据库中的数据进行比较匹配，通过匹配上的那些特征点的三维信息计算出当前的相机姿态，完成场景定位。该类算法的优点在于只要能够匹配上足够数目的特征点，就可利用三点法计算出相机的姿态。由于该类方法对场景进行的是稀疏表达，加上有些场景的纹理信息过于单一以及相机移动过程中存在运动模糊等问题，进行场景定位却无法匹配上足够数量特征点的情况时有发生，严重影响了场景定位的精度。而且特征点的检测、描述、匹配等算法都要消耗大量的运算资源，为了不影响场景定位的速度，此类算法大部分都限制了特征点数据库的规模，进而影响了场景定位的范围。

另一类是基于全局图像匹配的场景定位方法。和基于稀疏特征点匹配的场景定位算法不同，此类算法无需显式地进行特征点检测，而是使用整幅图像信息进行匹配比较。具体的做法是在在相机正常追踪时将一部分图像确定为关键帧，对这些关键帧进行编码并将每个关键帧对应的相机姿态一同存储到关键帧数据库中。当需要进行场景定位时，就对相机捕获的当前帧进行编码并和关键帧数据库中的数据进行比较，对匹配上的最相近的几个关键帧对应的相机姿态进行加权处理，就可还原出当前的相机姿态。该类算法的优点在于省去了特征点检测、描述、匹配的步骤，节约了大量的运算资源。不足之处在于每个关键帧在编码时通常都会采用下采样和亮度信息归一化等操作，随着关键帧数量的增加，关键帧之间的相似计算会变得越来越困难。而且对基于全局图像匹配的这类场景识别算法而言，识别结果只能依赖于数据库中存储的有限个相机姿态，严重制约了该类方法的可扩展性。

发明内容

针对现有技术所存在的上述技术问题，本发明提供了一种基于混合摄像机的室内场景定位方法，节省了特征点检测、描述、匹配的时间，使摄像机定位与状态无关，有效提高场景定位的精度和效率。

一种基于混合摄像机的室内场景定位方法，包括如下步骤：

(1)利用RGB-D(红绿蓝三原色加距离深度)混合摄像机拍摄室内场景，获得一路RGB图像序列和一路深度图像序列；

(2)提取深度图像序列每一帧图像中每个像素点的深度信息，实时产生室内场景的三维点云图并实时计算出混合摄像机参数；

(3)提取RGB图像序列每一帧图像中每个像素点的RGB信息并结合对应的深度信息，计算出每个像素点的特征值；进而根据实时的混合摄像机参数计算出RGB图像序列每一帧图像中每个像素点的世界坐标；

(4)根据各像素点的特征值和世界坐标，利用标准贪婪森林训练算法构建随机回归森林模型；

(5)针对当前利用RGB-D混合摄像机在室内拍摄得到一帧包含RGB和深度信息的场景图像，并计算出该场景图像中每个像素点的特征值输入至所述的随机回归森林模型中得到对应的世界坐标；

(6)对场景图像中的像素点进行分组，利用每组像素点的世界坐标以及摄像机坐标计算出一个当前摄像机的世界坐标；遍历各组得到多个当前摄像机的世界坐标，并从中选出最优的一个作为当前视点的位置信息。

所述的步骤(2)中根据以下算式实时计算混合摄像机参数：