[发明专利]一种改进的灰度图像的彩色背景的构建方法

摘要

本发明公开了一种改进的灰度图像的彩色背景的构建方法，通过图像拼接技术获得全景图和灰度场景图。再通过像素级比例缩放将灰度场景图缩放到和全景图相同位置处一样大小，进而完成模板匹配；接着对灰度场景图中的可移动物体进行图像修复处理来获得灰度场景图中可移动物体的掩膜。最后通过基于小波变换的图像融合技术将灰度图像中可移动物体的掩膜和彩色背景图像结合，最终获得包含灰度场景图中可移动物体的彩色背景图像。本发明独创性的考虑到灰度场景图本身所蕴含的可移动物体信息，并将其中可以作为背景的可移动物体提取出来放到模板匹配获得的彩色背景图中。本发明采用基于小波变换的图像融合技术，使得融合的效果可以满足在工作中使用。

主权项

1.一种改进的灰度图像的彩色背景的构建方法，其特征在于：包括以下步骤：A、全景图像采集通过红外摄像仪对固定区域拍摄多幅彩色场景图像，使其范围覆盖到所需要的全部场景信息；B、图像拼接在获得多幅彩色场景图像之后，通过采用尺度不变特征转换方法即SIFT方法，利用多幅彩色场景图像相同区域特征点匹配融合的算法，将所述的多幅彩色场景图像融合到一幅全景图当中；然后通过随机抽样一致方法即CV_RANSAC消除错误匹配点；C、灰度场景图获取利用红外摄像仪在全景范围内变焦后进行拍摄，使得拍摄的灰度场景图能够完全存在于之前获得的全景图当中，效果相当于将全景图中的某一部分进行放大；D、像素级比例缩放通过采用获取图像任意点的像素点坐标的方法，分别计算全景图和灰度场景图相同物体的像素差，该相同物体是不易在拼接的时候发生畸变、而且全景图和灰度场景图都必须包含的物体；因为在不同焦距拍摄同一物体的情况下，该物体宽高比是不变的，所以这里取物体高度的像素差；通过获得像素差进行灰度场景图的比例缩放，使得其大小和全景图相同位置的大小一致，其基本公式如下：M*N＝(M1*M2)*(h1/h2)其中，模板图像的大小为M*N，灰度场景图的大小为M1*M2，全景图栏杆高度的像素个数为h1，红外场景图栏杆高度的像素个数为h2；E、模板匹配通过对全景图和灰度场景图进行模板匹配，选择全景图为输入图像，灰度场景图为模板图像；其基本思路是，模板是一幅已知的小图像，模板匹配就是在一幅大图像中搜寻目标，已知该图像中有要找的目标，且该目标同模板有相同的尺寸、方向和物体，通过归一化的序贯相似性检测算法即SSAD法在图像中找到目标，确定其坐标位置，最后通过比较模板图和被模板图覆盖的搜索图的那块区域之间的相似性，完成模板匹配过程；F、车辆掩膜获取通过图像修复技术对输入的灰度场景图进行破坏，即用鼠标画出的粗白条进行破坏，沿着灰度场景图中的可移动物体的轮廓进行涂抹，最后获得该物体的掩膜图像，该方法只是用到了图像修复的前两个步骤并且它们的代码都压缩到一起，为了简洁方便，直接使用图像修复技术的代码，并且保存掩膜图像；G、基于小波变换的图像融合方法通过基于小波变换的图像融合技术，将从灰度场景图中获得的可移动物体的掩膜图像和模板匹配获得的彩色背景图像进行融合，使得最后获得的彩色背景图像中包括灰度场景图中的可移动物体，最终的效果为在彩色背景图像颜色信息没有太大变化的情况下，于灰度场景图相同区域处，有清晰的可移动物体存在；融合过程包括如下步骤：G1、图像预处理：图像预处理包括待融合图像配准和对图像的重采样；所述的待融合图像配准就是在变换空间中寻找一种特定的、最优的变换模型，确定配准参数，使得来自同一目标区域、在相同时间或不同时间、不同视角、由相同或不同传感器获取的两幅或多幅图像数据在相同坐标系下进行空间位置的最佳叠合、以保证小波系数在位置上的一一对应，使配准精度达到亚像素级；所述的对图像的重采样是当获得配准参数估计后，将待配准图像坐标做相应的几何变换，使之和参考图像处于同一坐标系下；由于变换以后的坐标不一定为整数，因此需要对变换后的图像进行重新插值处理，以保证待融合的图像具有相同的图像尺寸，保证分解后的小波系数是位置上一一对应的；G2、小波系数处理：进行小波变换后将原始图像数据按不同频带和分辨率分解成子带图像，每一层小波系数分解成4个子带：垂直和水平方向低频的子带LL即低频近似图像、水平方向低频和垂直方向高频的子带LH即高频垂直方向图像、垂直方向低频和水平方向高频的子带HL即高频水平方向图像、垂直和水平方向高频的子带HH、即高频对角线方向图像；在图像融合的应用中，只需要对待融合图像的高频系数进行融合操作处理，低频系数则是根据具体需求选取一幅待处理图像中的系数LL；G3、图像融合：设待融合图像记为X、Y，融合后的图像记为Z；它们的小波系数分别为Dx、DY和Dz，Ax和AY为待融合图像的高频小波系数，p(m,n,k,l)表示对应位置的小波系数，m、n分别表示p对应的空间位置，k表示小波变换级数，l表示小波变换的频带数；融合后图像Z的MSD系数的加权和公式如下：DZ(p)＝ωX(p)DX(p)+ωY(p)DY(p)融合后图像Z的MSD系数的绝对值较大者公式如下：Ai(p)＝max(AX(p),AY(p))其中i的取值为X或Y；G4、基于滑窗内像素的融合：设MXY(p)描述以p为中心像素的邻域内p对X、Y的匹配程度，其基本公式如下：其中，s、t分别是相对于m、n上的位置偏差，S、T分别表示s、t取得最大整数范围，ω(s,t)是p位置处在(m+s，n+t)时的权重；当MXY(p)小于某个阈值α，则ωX＝0，ωY＝1；否则，权重分别用如下公式计算：MXY表示两图像X、Y在某区域的匹配程度，该区域的范围由中心像素及其邻域决定；ωY＝1‑ωX结束。