[发明专利]一种面向动态环境稠密建图的动态物体检测方法

说明书

本发明公开了一种面向动态环境稠密建图的动态物体检测方法，在面向动态环境的稠密建图系统中，根据通过xtion pro live相机输入的RGBD视频流获得的RGB图和深度图进行动态场景的前后景分割，然后根据后景像素初步计算出相机运动模型，最后根据得到的相机位姿来判断场景中的动态物体。本发明基于前后景分割结合相机运动模型来判断动态背景中的动态物体，区别于在现有的Dense Visual SLAM中利用深度学习模型判断动态物体的策略，克服了基于深度学习的策略的实时性差、精度低和普适性低的缺点。

技术领域

本发明涉及动态物体检测的技术领域，尤其涉及到一种面向动态环境稠密建图的动态物体检测方法。

背景技术

动态物体检测问题是计算机视觉领域里对视频处理的基本且重要的问题之一，是识别、跟踪、行为分析等高级处理的的前提和关键，因此对视频中运动中的物体进行检测具有很强的应用和研究价值。

目前，针对视频中的动态物体检测的方法几乎是基于相机是静止的条件下提出，而不适用于相机运动的情况。在相机静止条件下的动态物体检测的技术已发展的很成熟，常用的算法有背景减去法、帧间差分法、光流法以及基于以上方法改进的三帧差分法等。而在相机运动的条件下，由于相机会发生平移、旋转、缩放的运动，导致目标和背景都会发生运动，使得基于相机静止提出的动态物体检测方法不再适用。而在当今生活中，视频处理技术已被各个领域所应用，比如在自动驾驶、机器人导航和Visual SLAM领域，如何在一个自身运动情况下面对复杂的动态环境进行动态物体检测是一个值得研究的问题。

虽然已有基于深度学习训练的目标检测模型和语义分割模型来对图像进行语义分析，通过模型得出的标签如人、椅子等来判断场景中的动态物体的方法，但这类方法由于需要大量的计算资源而无法实时运行。

发明内容

本发明的目的在于克服现有技术的不足，提供一种实时性好、精度高和普适性高的面向动态环境稠密建图的动态物体检测方法。

为实现上述目的，本发明所提供的技术方案为：

一种面向动态环境稠密建图的动态物体检测方法，在面向动态环境的稠密建图系统中，根据通过xtion pro live相机输入的RGBD视频流获得的RGB图和深度图进行动态场景的前后景分割，然后根据后景像素初步计算出相机运动模型，最后根据得到的相机位姿来判断场景中的动态物体。

进一步地，包括以下步骤：

S1、构建固定大小的滑动窗口，对输入的RGBD视频流和对应的相机位姿存储在滑动窗口中，用于构建帧与帧之间的运动约束；

S2、根据相机恒速模型，利用上一帧得到的相机位姿对上一帧的深度图做仿射变换，得到估计的当前帧深度图的值；

S3、计算当前帧深度值的中位数，结合步骤S2中得到的估计的当前帧深度图的值，以深度中位数值作为分界线，对当前帧进行前后景分割；

S4、根据得到后景像素点计算出当前相机运动的位姿，作为相机位姿的粗估计；

S5、根据空间点的空间距离一致性，利用当前帧深度图的数值做Kmeans聚类，得到在空间中x，y，z距离相近的多个聚类像素块，把当前动态场景分成固定大小个空间聚类，并认为属于一个类别的空间点具有相同的运动状态；

S6、根据后景像素点求出的相机位姿，对上一帧深度图做图像仿射变换得到估计的当前帧深度图，与当前帧输入的深度图的数值相比较，当两者差值相差超过阈值τ，则认为对应像素点为动态像素点，从而得到当前帧所有动态像素点、静态像素点和无效像素点；

S7、利用步骤S5中得到的空间聚类结果，检测每一个空间聚类块中被判断为动态像素点的比例，若比例高于阈值λ则认为该空间聚类块为动态聚类块，从而实现对动态区域的正确区分。