[发明专利]图像处理方法、装置、电子设备及计算机可读存储介质

说明书

本发明实施例提供了一种图像处理方法、装置、电子设备及计算机可读存储介质，所述方法包括：获取初始视频帧和第一视频帧，以及初始视频帧中的第一特征点和第一视频帧中的第二特征点；在完成初始视频帧中的第一特征点和第一视频帧的第二特征点的匹配后，将第一视频帧作为参考视频帧，并将成功匹配的第一视频帧中的第二特征点作为光流跟踪的初始点，对后面获取的更新视频帧进行光流跟踪，并计算更新映射矩阵，并且再将更新视频帧作为参考视频帧，对后续的视频帧继续进行光流跟踪，从而不需要再对更新视频帧及后续的视频帧获取特征点，就可以计算出映射矩阵，减少了计算量，提高计算速度，能够实现对具有连续性的视频图像进行实时的处理。

技术领域

本发明涉及计算机技术领域，特别是涉及一种图像处理方法、装置、电子设备及计算机可读存储介质。

背景技术

随着计算机技术、机器视觉技术的高速发展，对于各种图像进行处理的需求日益增加。在图像处理领域，针对具有连续性的多个视频图像进行处理时，往往需要对图像中的景物位置变化情况进行分析，确定出连续图像中景物位置变化的规律。

例如，在增强现实技术中，通过各类增强现实工具，如手机、智能眼镜等，可以将虚拟物品呈现在通过摄像头获取的实际场景的图像中。当增强现实工具产生姿态位置变化时，可以通过摄像头所获取的图像的变化来确定出增强现实工具姿态位置的变化，进而更好的将虚拟物品呈现在图像中。增强现实工具的摄像头所获取的是实际场景的具有连续性的图像，通过对连续图像进行处理，可以得到每一帧图像之间的映射矩阵，即上一帧图像中的点位置坐标，可以通过该映射矩阵映射至下一帧图像中。如果可以得到该映射矩阵，则可以反推出实际场景的位置变化，即可以确定出增强现实工具姿态位置的变化。

在现有技术中，在对具有连续性的视频图像的景物位置变化情况进行分析时，往往需要确定出初始图像的特征点和发生位置变化后的图像的特征点，通过特征点的匹配，建立起两幅图像之间的映射矩阵。应用上述方法时，需要对获取的每一帧图像都确定特征点并计算映射矩阵，然而计算特征点的计算量较大，在对连续的视频图像进行处理时，计算耗时较长，无法实现实时的连续图像的处理。

发明内容

本发明实施例的目的在于提供一种图像处理方法、装置、电子设备及计算机可读存储介质，以提高图像处理效率，实现对连续的视频图像进行实时处理。具体技术方案如下：

本发明实施例公开了一种图像处理方法，包括：

获取初始视频帧和所述初始视频帧之后的第一视频帧，并确定出所述初始视频帧与所述第一视频帧之间的第一映射矩阵，所述第一映射矩阵为用于将所述初始视频帧中的点的坐标映射至所述第一视频帧中的点的坐标的转换矩阵；

将所述第一视频帧作为参考视频帧，将所述第一映射矩阵作为参考矩阵，将所述第一视频帧中与所述第一特征点匹配成功的第二特征点作为光流跟踪初始点；

获取所述参考视频帧之后的更新视频帧；

通过所述光流跟踪初始点，对所述更新视频帧进行光流跟踪，在所述更新视频帧中确定出与所述各光流跟踪初始点相对应的光流跟踪终点；

通过所述各光流跟踪初始点和所对应的光流跟踪终点，计算更新映射矩阵，所述更新映射矩阵为用于将所述参考视频帧中的点的坐标映射至所述更新视频帧中的点的坐标的转换矩阵；

将所述更新视频帧作为新的参考视频帧，将所述参考矩阵和所述更新映射矩阵相乘得到的矩阵作为新的参考矩阵。

可选的，所述获取初始视频帧和所述初始视频帧之后的第一视频帧，并确定出所述初始视频帧与所述第一视频帧之间的第一映射矩阵，包括：

获取初始视频帧，并确定所述初始视频帧中多个第一特征点；

获取所述初始视频帧之后的第一视频帧，并确定所述第一视频帧中多个第二特征点；