[发明专利]图像处理方法、装置、电子设备及存储介质

说明书

本公开关于一种图像处理方法、装置、电子设备及存储介质，所述方法包括：实时采集人脸视频数据，将人脸视频数据中的每帧人脸图像帧作为待处理图像；对待处理图像进行人脸识别，得到人脸关键点；从人脸关键点中提取预设区域的参考关键点，根据参考关键点的位置信息确定放大系数；根据放大系数对人脸进行放大，并根据人脸识别得到的人脸运动信息对放大后的人脸进行人脸跟踪。根据本公开的方案，通过采用预设区域中的参考关键点，解决了关键点较多带来的性能瓶颈问题；通过以预设区域中的多个关键点为参考确定放大系数，还能确保对人脸进行放大处理的精度。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、电子设备及存储介质。

背景技术

随着智能终端的普及以及图像处理技术的发展，越来越多的应用程序可以对图像中的人脸进行处理，以达到需要的效果，例如，智能美颜、魔法特效、人脸追踪等。而随着智能终端软硬件的飞速发展，实时渲染技术在智能终端的应用变得越来越广，在智能终端进行这些效果的实时展现也变为可能。例如，可以通过深度神经网络对终端静态、亦或实时拍摄的图像进行语义分割，获得人脸的关键点、发型区域掩码图、五官位置的掩码图等图像处理结果，利用所得到的图像处理结果实现很多有创意的效果，例如，五官的放大、错位，人脸的贴纸、贴妆等。

为了实现提高人脸追踪精度、或者提高人脸呈现效果等目的，可以对图像中的人脸进行聚焦处理，以使人脸以较大的面积显示于屏幕中心位置。相关技术中，常采用以下两种实现方式对人脸进行聚焦处理：

(1)获取人脸的全部关键点数据；将全部的人脸关键点数据从CPU(CentralProcessing Unit，中央处理器)传入GPU(Graphics Processing Unit，图形处理器)；基于全部关键点数据创建一个虚拟框的临界区域；将虚拟框的临界区域聚焦到屏幕中心。采用这种方式虽呈现效果较好，但是由于全部的人脸关键点数量较多(可达到上百个)，将全部的人脸关键点数据从CPU传输至GPU对设备的性能有一定的影响。

(2)获取单一的人脸关键点数据；根据单一的人脸关键点数据直接进行图像的warp(变形)操作，将人脸聚焦到屏幕中心。采用这种方式由于所采用的人脸关键点较少，使得呈现效果稳定性较差。

因此，采用相关技术中的方式存在性能和准确性不能兼容的问题。

发明内容

本公开提供一种图像处理方法、装置、电子设备及存储介质，以至少解决相关技术中对人脸进行聚焦处理存在性能和准确性不能兼容的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种图像处理方法，其特征在于，包括：

实时采集人脸视频数据，将所述人脸视频数据中的每帧人脸图像帧作为待处理图像；

对所述待处理图像进行人脸识别，得到人脸关键点；

从所述人脸关键点中提取预设区域的参考关键点，根据所述参考关键点的位置信息确定放大系数；

根据所述放大系数对人脸进行放大，并根据所述人脸识别得到的人脸运动信息对放大后的所述人脸进行人脸跟踪。

在其中一个实施例中，所述方法还包括：

从所述参考关键点中获取人脸中心区域中的目标关键点；

根据预设的目标关键点的位置和目标位置的对应关系，确定与所述目标关键点对应的目标位置；

以所述目标位置相对所述目标关键点的方向对所述人脸进行移动，直至所述目标关键点到达所述目标位置。

在其中一个实施例中，所述预设的目标关键点的位置和目标位置的对应关系，包括：