[发明专利]图像修补方法、设备及介质

权利要求书

1.一种图像修补方法，包括：

分别基于对于同一个空间拍摄得到的第一全景图像和第二全景图像，确定第一组三维布局图和第二组三维布局图，其中所述第一全景图像和所述第二全景图像的拍摄位置不同，所述第一组三维布局图和所述第二组三维布局图均包括能够体现出所述空间的结构的多张图像；

在第一组三维布局图中，确定目标对象所位于的一张图像作为待修补图像，并且在第二组三维布局图中，确定所述目标对象所位于的一张图像作为参考图像，其中当拍摄所述第一全景图像时所述目标对象在所述空间中的位置与当拍摄所述第二全景图像时所述目标对象在所述空间中的位置不同；

在所述参考图像中，确定与所述待修补图像中包含目标对象的区域匹配的、不包含所述目标对象的经匹配区域；以及

通过以所述参考图像中的经匹配区域替换所述待修补图像中的包含所述目标图像的区域，生成经修补图像。

2.根据权利要求1所述的方法，其中在所述参考图像中，确定与所述待修补图像中包含目标对象的区域匹配的、不包含所述目标对象的经匹配区域，包括：

确定所述目标对象在所述待修补图像和所述参考图像中的第一位置和第二位置；

分别在所述待修补图像和所述参考图像中，确定包含所述第一位置和所述第二位置的重叠区域，作为第一匹配区域和第二匹配区域；

在所述第一匹配区域与所述第二匹配区域之间进行特征点匹配，以确定变换矩阵；

基于所述变换矩阵，将所述第二匹配区域变换为第三匹配区域；以及

通过在所述第三匹配区域中，去除包含所述目标对象的区域，来生成所述经匹配区域。

3.根据权利要求2所述的方法，其中基于所述第一位置和所述第二位置，分别在所述待修补图像和所述参考图像中，确定包含所述第一位置和所述第二位置的重叠区域，作为第一匹配区域和第二匹配区域，包括：

在所述待修补图像中，标注所述第二位置，确定以所述第一位置为中心的第一区域和以所述第二位置为中心的第二区域，并将所述第一区域和所述第二区域的重叠区域作为所述第一匹配区域；以及

在所述参考图像中，标注所述第一位置，确定以所述第一位置为中心的第三区域和以所述第二位置为中心的第四区域，并将所述第三区域和所述第四区域的重叠区域作为所述第二匹配区域。

4.根据权利要求3所述的方法，其中确定以所述第一位置为中心的第一区域和以所述第二位置为中心的第二区域，包括：

以所述第一位置为中心，以所述第一位置和所述第二位置的连线为对角线方向，且以所述第一位置和所述第二位置之间的距离与第一系数的乘积作为对角线长度的一半，绘制矩形作为所述第一区域；以及

以所述第二位置为中心，以所述第一位置和所述第二位置的连线为对角线方向，且以所述第一位置和所述第二位置之间的距离与第二系数的乘积作为对角线长度的一半，绘制矩形作为所述第二区域。

5.根据权利要求1所述的方法，其中在确定经匹配区域之前，进一步包括：

对所述待修补图像进行颜色校准。

6.根据权利要求5所述的方法，其中对所述待修补图像进行颜色校准，包括：

将所述待修补图像和所述参考图像从RGB颜色空间变换到LAB颜色空间；

分别计算所述待修补图像和所述参考图像在LAB颜色空间中每个通道的平均值和方差；

基于所述待修补图像在LAB颜色空间中每个通道的平均值和方差，对所述待修补图像在LAB颜色空间中每个通道的值进行归一化；

基于所述参考图像在LAB颜色空间中每个通道的平均值和方差，对所述待修补图像在LAB颜色空间中每个通道的归一化的值进行去归一化；以及

将去归一化后的待修补图像从LAB颜色空间变换回RGB颜色空间。

7.根据权利要求1所述的方法，其中在生成经修补图像之后，进一步包括：

基于所述经修补图像和所述第一组三维布局图中的其他图像，生成经修补的第一全景图像。