[发明专利]基于SIFT特征匹配的多图像修补方法及系统

说明书

本发明提供了一种基于SIFT特征匹配的多图像修补方法及系统，包括：获取待修补图像，获取所述待修补图像的一张或多张参考图像；计算所述带修补图像和所述参考图像匹配的SIFT特征点；根据所述带修补图像中所要修补的范围，在所述范围中寻找匹配的SIFT特征点，并计算匹配的SIFT特征点的闭包，通过三角剖分的方式将所述范围划分为多个三角形面片，通过三角形仿射变换将参考图像中对应的三角形面片贴到待修补图像对应的三角形面片上，得到修补后的图像。通过SIFT特征点匹配的方式，对需要修补的区域，从参考图片中去取相应的像素点进行修补。再通过图像和颜色融合的方式，实现修补后的内容与真实场景一致的效果。

技术领域

本发明涉及图像处理领域，具体地，涉及一种基于SIFT特征匹配的多图像修补方法及系统。

背景技术

景点人像拍摄中，经常会有路人意外闯入的情况，影响画面的效果。一般的修补技术，想把这些人物去除，基本上都是利用单张图像中其他区域的纹理来进行修补，如PS中的内容识别功能采用的是PatchMatch算法。但这样修补出来的内容，往往与真实的场景出入很大。

经过检索发现，专利文献CNCN104616247A公开了一种基于SIFt特征的图像拼接方法，其中采用SIFT特征点进行全景图像拼接，并没有提及采用SIFT特征点进行人物去除和图像修补。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种基于SIFT特征匹配的多图像修补方法及系统。

根据本发明提供的一种基于SIFT特征匹配的多图像修补方法，包括：

图像获取步骤：获取待修补图像，获取所述待修补图像的一张或多张参考图像；

SIFT特征点计算步骤：计算所述带修补图像和所述参考图像匹配的SIFT特征点；

修补步骤：根据所述带修补图像中所要修补的范围，在所述范围中寻找匹配的SIFT特征点，并计算匹配的SIFT特征点的闭包，通过三角剖分的方式将所述范围划分为多个三角形面片，通过三角形仿射变换将参考图像中对应的三角形面片贴到待修补图像对应的三角形面片上，得到修补后的图像。

优选地，还包括：

融合步骤：通过图像融合和颜色匹配，将修补后的图像进行颜色统一。

优选地，所述图像获取步骤包括：

通过图片搜索算法或图片网站提供的API接口，搜索出与所述待修补图像类似的所述参考图像。

优选地，还包括舍弃不可用的参考图像：

在图像获取步骤中，获取所述参考图像后，判断参考图像中是否含有人物，对于含有人物的参考图像做舍弃处理；或者，

在修补步骤中，根据所述带修补图像中所要修补的范围，判断所述参考图像中与所述范围相对应的位置是否含有人物，对于含有人物的参考图像做舍弃处理。

优选地，所述修补步骤中还包括：

在寻找匹配的SIFT特征点之前，对所要修补的范围做膨胀处理，将所述范围扩大至包含预设数量个SIFT特征点以上。

根据本发明提供的一种基于SIFT特征匹配的多图像修补系统，包括：

图像获取模块：获取待修补图像，获取所述待修补图像的一张或多张参考图像；

SIFT特征点计算模块：计算所述带修补图像和所述参考图像匹配的SIFT特征点；