[发明专利]图像处理方法及装置、电子设备和存储介质

说明书

本公开涉及一种图像处理方法及装置、电子设备和存储介质。所述方法包括：对第一图像和第二图像分别进行色块分割，得到所述第一图像对应的第一色块分割结果和所述第二图像对应的第二色块分割结果，其中，对于所述第一色块分割结果和所述第二色块分割结果中的任意一个色块，所述色块中的任意两个像素的像素值的差值的绝对值小于或等于第一预设阈值；对所述第一色块分割结果中的色块与所述第二色块分割结果中的色块进行匹配，得到所述第一色块分割结果与所述第二色块分割结果之间的色块匹配结果；根据所述色块匹配结果，确定所述第一图像与所述第二图像之间的第一光流。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种图像处理方法及装置、电子设备和存储介质。

背景技术

光流(optical flow)法是图像分析的重要方法，是利用图像序列中相邻帧之间的相关性来找到上一帧与当前帧之间存在的对应关系，从而计算出相邻帧之间目标对象的运动信息的一种方法。光流表达了图像在时域上的变化。由于光流包含了图像中的目标对象的运动信息，因此可以被观察者用来确定目标对象的运动情况。对光流的研究成为计算机视觉及有关研究领域中的一个重要部分。准确地确定图像序列中相邻帧之间的光流，在视频插帧、视频压缩等方面具有重要意义。

发明内容

本公开提供了一种图像处理技术方案。

根据本公开的一方面，提供了一种图像处理方法，包括：

对第一图像和第二图像分别进行色块分割，得到所述第一图像对应的第一色块分割结果和所述第二图像对应的第二色块分割结果，其中，对于所述第一色块分割结果和所述第二色块分割结果中的任意一个色块，所述色块中的任意两个像素的像素值的差值的绝对值小于或等于第一预设阈值；

对所述第一色块分割结果中的色块与所述第二色块分割结果中的色块进行匹配，得到所述第一色块分割结果与所述第二色块分割结果之间的色块匹配结果；

根据所述色块匹配结果，确定所述第一图像与所述第二图像之间的第一光流。

通过对第一图像和第二图像分别进行色块分割，得到所述第一图像对应的第一色块分割结果和所述第二图像对应的第二色块分割结果，其中，对于所述第一色块分割结果和所述第二色块分割结果中的任意一个色块，所述色块中的任意两个像素的像素值的差值的绝对值小于或等于第一预设阈值，对所述第一色块分割结果中的色块与所述第二色块分割结果中的色块进行匹配，得到所述第一色块分割结果与所述第二色块分割结果之间的色块匹配结果，并根据所述色块匹配结果，确定所述第一图像与所述第二图像之间的第一光流，由此能够准确地确定所述第一图像与所述第二图像之间的光流。

在一种可能的实现方式中，在所述确定所述第一图像与所述第二图像之间的第一光流之后，所述方法还包括：

根据所述第一图像对应的第一图像特征和所述第二图像对应的第二图像特征，对所述第一图像与所述第二图像之间的第一光流进行优化，得到所述第一图像与所述第二图像之间的第二光流。

在该实现方式中，通过在所述确定所述第一图像与所述第二图像之间的第一光流之后，根据所述第一图像对应的第一图像特征和所述第二图像对应的第二图像特征，对所述第一图像与所述第二图像之间的第一光流进行优化，得到所述第一图像与所述第二图像之间的第二光流，由此提高所确定的光流的准确性。对于非线性、运动幅度较大的应用场景，通过采用该实现方式，能够较大幅度地提高所确定的光流的准确性。

在一种可能的实现方式中，

所述第一图像和所述第二图像是目标视频中的相邻帧；

在所述得到所述第一图像与所述第二图像之间的第二光流之后，所述方法还包括：根据所述第一图像对应的第三图像特征和所述第二图像对应的第四图像特征，以及所述第一图像与所述第二图像之间的第二光流，确定所述第一图像和所述第二图像的中间帧。