[发明专利]视频防抖方法、终端设备和计算机可读存储介质

说明书

本申请实施例公开了一种视频防抖方法、终端设备和计算机可读存储介质，该方法包括：获取待处理图像，待处理图像为待处理视频中的一帧图像；对待处理图像进行前后景分割，得到第一后景图像和第一前景图像；对第一前景图像进行防抖处理，得到第一前景增稳图像；对第一后景图像进行防抖处理，得到第一后景增稳图像；将第一前景增稳图像和第一后景增稳图像进行融合，得到待处理图像的第一增稳图像。本申请实施例对视频图像进行前后景分割，得到前景图像和后景图像，再分别对前景图像和后景图像进行防抖处理，即前景和后景的防抖处理过程是分离的，不耦合的，进而不用牺牲背景防抖能力，也能实现前景和后景的同时稳像。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种视频防抖方法、终端设备和计算机可读存储介质。

背景技术

目前，常见的视频防抖可以分为电子防抖(Electric Image Stabilization，EIS)和光学防抖(Optical Image Stabilization，OIS)。

一般情况下，EIS无需额外的元器件辅助，其是一种软件补偿算法，原理是通过算法对视频图像进行后期处理，以对所采集的视频图像进行防抖。现有的EIS方法中，首先通过终端设备的陀螺仪，获得视频图像的背景运动信息，视频图像背景运动信息(或称背景抖动)可以是指终端设备的摄像头运动而产生的运动信息。同时，采集视频图像的人脸特征，根据人脸特征计算人脸的平滑运动轨迹。然后，基于背景运动信息和人脸的平滑运动轨迹之间的权重，根据背景运动信息和人脸的平滑运动轨迹，最终得到相机平滑轨迹。最后，根据该相机平滑轨迹对视频图像进行消抖补偿，实现视频前景和后景的同时稳像。

但是，由于背景运动方向和人脸运动方向是相反的，使得背景运动信息和人脸的平滑运动轨迹之间的权重只能折中选取，进而导致前景的防抖效果和后景的防抖效果也是一个折中效果。换句话说，如果需要实现前景防抖，必须牺牲背景防抖能力，进而才能实现前景和后景同时稳像。

发明内容

有鉴于此，本申请实施例提供一种视频防抖方法、终端设备和计算机可读存储介质，以解决现有EIS方法中，需要牺牲背景防抖能力才能实现前景和后景同时稳像的问题。

第一方面，本申请实施例提供一种视频防抖方法，该方法可以应用于终端设备，该终端设备可以例如为手机和平板等，该方法可以包括：获取待处理图像，该待处理图像为待处理视频中的一帧图像；对待处理图像进行前后景分割，得到第一后景图像和第一前景图像；对第一前景图像进行防抖处理，得到第一前景增稳图像；对第一后景图像进行防抖处理，得到第一后景增稳图像；将第一前景增稳图像和第一后景增稳图像进行融合，得到待处理图像的第一增稳图像。

本申请实施例通过对视频图像进行前后景分割，得到前景图像和后景图像，再分别对前景图像和后景图像进行防抖处理，即前景和后景的防抖处理过程是分离的，不耦合的，进而不用牺牲背景防抖能力，也能实现前景和后景的同时稳像。

在第一方面的一些可能的实现方式中，对第一前景图像进行防抖处理，得到第一前景增稳图像的过程可以包括：提取第一前景图像的特征点；根据第一前景图像的特征点和第二前景图像的特征点，得到第一运动轨迹曲线，第二前景图像为第一目标图像的前景图像，待处理视频包括第一目标图像，且第一目标图像和待处理图像在图像序列上是连续的图像帧；根据待处理图像的前景防抖强度，对第一运动轨迹曲线进行路径平滑，得到路径平滑后的第二运动轨迹曲线；根据第二运动轨迹曲线和第一前景图像，得到增稳后的第一前景图像；对增稳后的第一前景图像进行边缘补偿，得到第一前景增稳图像。

增稳后的第一前景图像中，图像边缘会有无意义的像素点生成，进而不利于前后景融合，而该实现方式中，通过对增稳后的第一前景图像进行边缘补偿，使得第一前景增稳图像中不包含黑边，进一步提高后续图像融合得到的视频图像效果。

在第一方面的一些可能的实现方式中，对所述增稳后的第一前景图像进行边缘补偿，得到所述第一前景增稳图像的过程可以包括：