[发明专利]三维人脸建模方法、装置、电子设备及存储介质

说明书

本申请实施例涉及图像处理技术领域，提供了一种三维人脸建模方法、装置、电子设备及存储介质。三维人脸建模方法包括：基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图；对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型。本申请实施例提供的一种三维人脸建模方法、装置、电子设备及存储介质，在保证三维人脸建模的准确性和可靠性的同时，有效减小三维人脸建模的计算量，缩短三维人脸建模的计算时间，降低三维人脸建模对于计算平台的计算能力的要求，扩宽三维人脸建模的使用范畴。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种三维人脸建模方法、装置、电子设备及存储介质。

背景技术

随着计算机图形学与图像处理技术的发展，三维人脸建模技术在游戏动漫、影视广告、视频会议和可视电话等相关行业得到了广泛的应用。

从建模精度和完整性的角度考虑，通常用于三维人脸建模的人脸图像数量越多，其中包含的深度信息越多，由此得到的三维人脸模型的可靠性越高，对于细节的描述越好。然而建模过程中大量人脸图像的处理必然需要耗费大量的计算资源和计算时间，给计算平台带来很大的负担，且计算结果的准确性难以保证。

发明内容

本申请提供一种三维人脸建模方法、装置、电子设备及存储介质，用以提供一种低计算需求的三维人脸建模方案，以扩宽三维人脸建模的适用范畴。

本申请提供一种三维人脸建模方法，包括：

基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图；

对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型。

根据本申请提供一种的三维人脸建模方法，所述基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图，包括：

确定采集所述人脸视频流所用深度相机对应的建模角度需求；

从所述人脸视频流中选取所述人脸角度值符合所述建模角度需求的人脸深度图，作为所述关键深度图。

根据本申请提供一种的三维人脸建模方法，所述确定采集所述人脸视频流所用深度相机对应的建模角度需求，包括：

确定采集所述人脸视频流所用深度相机的成像质量；

基于所述成像质量确定所述建模角度需求。

根据本申请提供一种的三维人脸建模方法，所述人脸深度图的人脸角度值是基于如下步骤确定的：

对任一人脸深度图对应的人脸彩色图进行人脸特征提取，得到所述人脸彩色图包含目标人脸的多个特征点的二维坐标；

基于每个特征点的二维坐标，确定每个特征点在所述任一人脸深度图中的三维坐标；

基于每个特征点的二维坐标和三维坐标，确定所述任一人脸深度图的人脸角度值。

根据本申请提供一种的三维人脸建模方法，所述对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型，包括：

对每帧关键深度图的点云数据进行配准；

拼接配准后的每帧关键深度图的点云数据，得到人脸点云数据；

基于所述人脸点云数据，构建三维人脸模型。

根据本申请提供一种的三维人脸建模方法，所述对每帧关键深度图的点云数据进行配准，包括：

确定每帧关键深度图的点云数据中每个点的法线和/或曲率；