[发明专利]一种立体图像重定位方法

摘要

本发明公开了一种立体图像重定位方法，其首先分别提取左视点图像的立体显著图和显著能量图，并采用动态规划方法找出左视点图像的所有垂直缝隙；然后根据左视点图像中的每个像素点的水平偏移值对左视点图像的所有垂直缝隙进行调整，获取所有最优垂直缝隙；接着根据左视点图像的所有最优垂直缝隙找出右视点图像的所有最优垂直缝隙；再将落于左视点图像的所有最优垂直缝隙和右视点图像的所有最优垂直缝隙内的像素点移除，得到重定位后的立体图像；优点是获得的重定位后的立体图像既保留了重要的显著语义信息，又能保证左视点图像和右视点图像的一致性。

主权项

一种立体图像重定位方法，其特征在于包括以下步骤：①将待处理的立体图像的左视点图像记为{Li(x,y)}，将待处理的立体图像的右视点图像记为{Ri(x,y)}，将待处理的立体图像的左视差图记为{dL(x,y)}，其中，i＝1,2,3，1≤x≤W，1≤y≤H，W表示待处理的立体图像的宽度，H表示待处理的立体图像的高度，Li(x,y)表示{Li(x,y)}中坐标位置为(x,y)的像素点的第i个分量的颜色值，Ri(x,y)表示{Ri(x,y)}中坐标位置为(x,y)的像素点的第i个分量的颜色值，第1个分量为R分量、第2个分量为G分量、第3个分量为B分量，dL(x,y)表示{dL(x,y)}中坐标位置为(x,y)的像素点的像素值；②采用超像素分割技术将{Li(x,y)}分割成M个互不重叠的区域；然后将{Li(x,y)}重新表示为M个区域的集合，记为{SPh}；接着通过计算{SPh}中的每个区域的颜色对比度、空间紧密度和深度显著值，获取{SPh}中的每个区域的显著值；再将{SPh}中的每个区域的显著值作为该区域中的所有像素点的显著值，从而得到{Li(x,y)}的立体显著图，记为{Sstereo(x,y)}；其中，M≥1，SPh表示{SPh}中的第h个区域，1≤h≤M，Sstereo(x,y)表示{Sstereo(x,y)}中坐标位置为(x,y)的像素点的像素值，亦表示{Li(x,y)}中坐标位置为(x,y)的像素点的显著值；③利用人类立体视觉感知对背景光照和对比度的视觉掩蔽效应，提取出{Li(x,y)}的双目最小可察觉变化图像，记为{JL(x,y)}，其中，JL(x,y)表示{JL(x,y)}中坐标位置为(x,y)的像素点的像素值，亦表示{Li(x,y)}中坐标位置为(x,y)的像素点的双目最小可察觉变化值；④根据{dL(x,y)}获取{Li(x,y)}中的每个像素点的深度能量值，并根据{JL(x,y)}获取{Li(x,y)}中的每个像素点的掩蔽能量值和一致性能量值，然后根据{Li(x,y)}中的每个像素点的深度能量值、掩蔽能量值和一致性能量值，得到{Li(x,y)}的显著能量图，记为{Estereo(x,y,x*)}，其中，Estereo(x,y,x*)表示{Estereo(x,y,x*)}中坐标位置为(x,y)的像素点的像素值，亦表示{Li(x,y)}中坐标位置为(x,y)的像素点的显著能量值，x*表示坐标位置(x,y)的横坐标位置或与坐标位置(x,y)水平相邻的横坐标位置，x*∈{x‑1,x,x+1}；⑤将重定位后的立体图像的宽度记为W'，将{Li(x,y)}和{Ri(x,y)}各自的垂直缝隙的条数记为Ns，Ns＝W‑W'，其中，W'<W；⑥根据{Sstereo(x,y)}和{Estereo(x,y,x*)}，通过动态规划方法找出{Li(x,y)}的Ns条垂直缝隙；然后获取{Li(x,y)}中的每个属于遮挡区域的像素点的水平偏移值和每个属于匹配区域的像素点的水平偏移值；再根据{Li(x,y)}中的每个属于遮挡区域的像素点的水平偏移值和每个属于匹配区域的像素点的水平偏移值，对{Li(x,y)}的Ns条垂直缝隙进行调整，得到{Li(x,y)}的Ns条最优垂直缝隙，将{Li(x,y)}的第i'条最优垂直缝隙记为其中，1≤i'≤Ns，表示在纵坐标位置为y时的横坐标位置；⑦根据{Li(x,y)}的Ns条最优垂直缝隙和{dL(x,y)}，找出{Ri(x,y)}的Ns条最优垂直缝隙，将{Ri(x,y)}的第i'条最优垂直缝隙记为其中，1≤i'≤Ns，表示在纵坐标位置为y时的横坐标位置，表示{dL(x,y)}中坐标位置为的像素点的像素值；⑧将{Li(x,y)}中所有落在{Li(x,y)}的Ns条最优垂直缝隙内的像素点删除，得到重定位后的左视点图像并将{Ri(x,y)}中所有落在{Ri(x,y)}的Ns条最优垂直缝隙内的像素点删除，得到重定位后的右视点图像根据重定位后的左视点图像和重定位后的右视点图像得到重定位后的立体图像，其中，1≤x1≤W'，表示中坐标位置为(x1,y)的像素点的第i个分量的颜色值，表示中坐标位置为(x1,y)的像素点的第i个分量的颜色值。