[发明专利]一种搜跟系统中航拍视频的快速自动拼接技术

说明书

技术领域

本发明属于图像自动拼接技术领域，具体涉及一种搜跟系统中航拍视频的快速自动拼接技术。 

背景技术

图像拼接中最关键的步骤是图像特征点的寻找及匹配。杨涛等人（基于场景复杂度与不变特征的航拍视频实时配准算法.电子学报，2010.5，5期38卷）提出了利用Harris角点和SIFT描述子相结合的方式进行图像匹配，保证了算法具有良好的旋转、尺度、亮度不变性和配准精度使算法。但由于前期特征点提取的数量较多，导致后期计算量过大，无法真正意义上实现图像拼接的实时性。针对这个问题，需要从简化特征点的提取与匹配运算量入手优化算法。 

很多人提出了多种图像自动拼接技术的实现方法，主要有基于特征点的方法、基于光流的方法，基于图像融合的方法等等。这些方法主要是利用图像的几何变换矩阵完成对图像的修正。这种方法对于帧数较少的图像序列来说，拼接效果很好，但随着视频序列帧数的增加，图像拼接的几何变换矩阵就会因为前期不断地叠加而产生误差的累积与放大；同时，由于飞机的抖动和场景变换明显，也会导致图像拼接的准确率降低，同时还会导致图像拼接过程的中断 

发明内容

本发明公开了一种搜跟系统中航拍视频的快速自动拼接技术，提高了图像拼接的准确度和稳健性。 

为了解决上述技术问题，本发明提出一种搜跟系统中航拍视频的快速自动拼接技术，包括以下步骤： 

步骤一：将航拍视频序列中连续两帧彩色图像I和J转化成灰度图像I_g和J_g，并记录帧序号Z和Z+1； 

步骤二：利用图像三值化方法对灰度图像I_g进行三值化处理获得三值化图像，利用边缘检测sobel算子提取三值化图像的边缘特征信息获得边缘特征信息图像I_f，使用 Harris算法提取边缘特征信息图像I_f的特征点，在提取三值化图像边缘特征信息的过程中，设定sobel算子的边缘检测阈值为S₁和S₂，S₁代表水平方向的边缘计算参数阈值，S₂代表垂直方向的边缘计算参数阈值； 

步骤三：利用光流金字塔（KLT）算法计算光流，完成灰度图像I_g和J_g的特征点匹配； 

步骤四：结合DLT算法和RANSAC算法计算得出彩色图像I和J的最优单应性矩阵H_I,J和图像拼接的修正矩阵H'_z，并求解出图像拼接的修正几何转换矩阵P； 

步骤五：利用修正几何转换矩阵P对彩色图像J进行图像修正得到图像J'，设置一个长宽为彩色图像J长宽两倍的黑色背景，将修正后的图像J'的像素信息J'(x',y')贴至黑色背景中，完成图像全景的拼接； 

步骤六：将当前帧图像的单应性矩阵H_I,J与已保存的前帧图像的单应性矩阵H_I-1,I比较，将准确匹配的特征点对数目N与特征点对数目阈值N_f进行比较，根据比较结果动态调整图像三值化的上下限阈值T₁和T₂以及sobel算子的边缘检测的阈值S₁和S₂。 

本发明与现有技术相比，其显著优点在于，采用图像三值化、边缘提取和Harris角点检测三者结合的方法来降低特征点的数量，并筛选出图像中最为稳定的、特征最为突出的特征点；采用了RANSAC算法与DLT算法结合的方法，求解出带有修正矩阵的图像几何转换矩阵矩阵，提高图像拼接的准确度；阈值动态调整有效解决了因图像场景变换明显或飞机抖动等原因造成的程序中断问题。 

附图说明

图1是本发明简要流程图。 

图2是本发明详细流程图。 

图3（a）是仅利用Harris算法提取特征点效果图；图3（b）是本发明步骤二中经过图像三值化和sobel算子边缘检测后，再利用Harris算法提取特征点的效果图。 

图4（a）和图4（b）分别为本发明实施例自动拼接70帧和150帧的总场景图。 

具体实施方式

如图1和图2所示，本发明一种搜跟系统中航拍视频的快速自动拼接技术，包括以 下步骤： 

步骤一：将航拍视频序列中连续两帧彩色图像I和J转化成灰度图像I_g和J_g，并记录帧序号Z和Z+1。