[发明专利]图像处理方法、装置、设备及介质

说明书

本公开实施例涉及一种图像处理方法、装置、设备及介质，其中该方法包括：计算第一图像与待对齐的原始参考图像的光流；确定第一图像相对图像背景的位置变化状态；确定与位置变化状态对应的候选流场；根据光流和候选流场对齐第一图像和原始参考图像。由此，结合候选流场和光流各自的特点进行图像对齐，无论第一图像中的相关物体相对原始参考图像是相对静态变化还是动态变化，均可以保证图像对齐的效果。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、设备及介质。

背景技术

光流是一种图像对齐技术，一般而言，光流是由于场景中前景物体本身的移动、相机的运动，或者两者的共同运动所产生的。当人的眼睛观察运动物体时，物体的景象在人眼的视网膜上形成一系列连续变化的图像，这一系列连续变化的信息不断“流过”视网膜(即图像平面)，好像一种光的“流”，故称之为光流。光流表达了图像的变化，由于它包含了物体运动的信息，因此在图像处理时常被用来确定目标的运动情况。

相关技术中，在进行光流计算时，是利用图像序列中像素在时间域上的变化以及待对齐的目标图像和参考图像之间的相关性，来找到两张图像之间物体的运动矢量场得到光流。在计算图像之间对齐的光流时，计算参考图像中的每个像素点移动到目标图像中对应像素点的运二维速度矢量，根据所有像素点的二维速度矢量获取光流，进而基于光流实现图像之间的对齐。

然而，上述基于光流实现图像之间的对齐时，依赖于对每个像素点移动的二维速度矢量的获取，当图像中存在纹理不明显区域或者物体不运动时，则无法获知对应像素点的二维速度矢量，从而影响光流的获取精度，进而，影响图像的对齐效果。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种图像处理方法，所述方法包括：计算第一图像与待对齐的原始参考图像的光流；确定所述第一图像相对图像背景的位置变化状态；确定与所述位置变化状态对应的候选流场；根据所述光流和所述候选流场对齐所述第一图像和所述原始参考图像。

本公开实施例还提供了一种图像处理装置，所述装置包括：计算模块，用于计算第一图像与待对齐的原始参考图像的光流；第一确定模块，用于确定所述第一图像相对图像背景的位置变化状态；第二确定模块，用于确定与所述位置变化状态对应的候选流场；图像对齐模块，用于根据所述光流和所述候选流场对齐所述第一图像和所述原始参考图像。

本公开实施例还提供了一种电子设备，所述电子设备包括：处理器；用于存储所述处理器可执行指令的存储器；所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现如本公开实施例提供的图像处理方法。

本公开实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行如本公开实施例提供的图像处理方法。

本公开实施例提供的技术方案与现有技术相比具有如下优点：本公开实施例提供的图像处理方案，计算第一图像与待对齐的原始参考图像的光流，进而，确定第一图像相对图像背景的位置变化状态，确定与位置变化状态对应的候选流场，最后，根据光流和候选流场对齐第一图像和原始参考图像。由此，结合候选流场和光流各自的特点进行图像对齐，无论第一图像中的相关物体相对原始参考图像是相对静态变化还是动态变化，均可以保证图像对齐的效果。

附图说明

结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。

图1为本公开实施例提供的一种图像处理方法的流程示意图；

图2为本公开实施例提供的一种光流在色彩模型中显示的示意图；

图3为本公开实施例提供的另一种图像处理方法的流程示意图；