[发明专利]视频美颜处理方法、装置、存储介质与电子设备

权利要求书

1.一种视频美颜处理方法，其特征在于，包括：

获取待处理视频，检测所述待处理视频中的人脸；

根据所述人脸在所述待处理视频的不同帧之间的变化，从所述待处理视频中提取所述人脸的关键帧人脸图像以及所述关键帧人脸图像对应的非关键帧人脸图像；

通过预先训练的深度神经网络对所述关键帧人脸图像提取基于三维网格的特征，并根据所提取的特征生成所述关键帧人脸图像的信息矩阵，所述三维网格是对所述关键帧人脸图像的空域与像素值域所形成的三维空间进行划分而得到的；

利用所述关键帧人脸图像的信息矩阵对所述关键帧人脸图像与所述关键帧人脸图像对应的所述非关键帧人脸图像进行美颜处理，基于美颜处理的结果得到所述待处理视频对应的美颜视频。

2.根据权利要求1所述的方法，其特征在于，所述根据所述人脸在所述待处理视频的不同帧之间的变化，从所述待处理视频中提取所述人脸的关键帧人脸图像以及所述关键帧人脸图像对应的非关键帧人脸图像，包括：

响应于所述人脸在所述待处理视频中的待处理帧与所述待处理帧的参考帧之间的变化程度满足预设条件，将所述待处理帧确定为所述人脸的关键帧，从所述关键帧中提取所述关键帧人脸图像。

3.根据权利要求2所述的方法，其特征在于，所述根据所述人脸在所述待处理视频的不同帧之间的变化，从所述待处理视频中提取所述人脸的关键帧人脸图像以及所述关键帧人脸图像对应的非关键帧人脸图像，还包括：

将相邻两关键帧之间的非关键帧确定为所述相邻两关键帧中的前一关键帧对应的非关键帧，从所述非关键帧中提取所述关键帧人脸图像对应的所述非关键帧人脸图像。

4.根据权利要求2所述的方法，其特征在于，所述人脸在所述待处理视频中的待处理帧与所述待处理帧的参考帧之间的变化程度满足预设条件，包括以下至少一种：

所述人脸在所述待处理帧与所述参考帧之间的尺寸变化值超过第一程度值；

所述人脸在所述待处理帧与所述参考帧之间的关键点位移值超过第二程度值；

所述人脸在所述待处理帧与所述参考帧之间的颜色变化值超过第三程度值。

5.根据权利要求1所述的方法，其特征在于，所述根据所述人脸在所述待处理视频的不同帧之间的变化，从所述待处理视频中提取所述人脸的关键帧人脸图像以及所述关键帧人脸图像对应的非关键帧人脸图像，包括：

根据所述人脸在所述待处理视频的不同帧之间的变化，从所述待处理视频中提取包括所述人脸的至少一个图像序列；

在每个所述图像序列中，确定一帧为所述人脸的关键帧，并确定其他帧为所述关键帧对应的非关键帧；

从所述关键帧中提取所述关键帧人脸图像，从所述非关键帧中提取所述非关键帧人脸图像。

6.根据权利要求1所述的方法，其特征在于，所述深度神经网络包括基础卷积层、网格特征卷积层、局部特征卷积层、输出层；所述通过预先训练的深度神经网络对所述关键帧人脸图像提取基于三维网格的特征，并根据所提取的特征生成所述关键帧人脸图像的信息矩阵，包括：

通过所述基础卷积层按照空域网格的尺寸对所述关键帧人脸图像进行下采样卷积处理，得到基础特征图像，所述空域网格为所述三维网格在所述空域上的二维投影；

通过所述网格特征卷积层对所述基础特征图像提取所述空域网格内的特征，得到网格特征图像；

通过所述局部特征卷积层对所述基础特征图像提取所述空域网格间的特征，得到局部特征图像；

通过所述输出层按照值域分区的数量对所述网格特征图像与所述局部特征图像进行维度转换，得到所述关键帧人脸图像的信息矩阵，所述值域分区为所述三维网格在所述像素值域上的一维投影。