[发明专利]三维人脸建模方法、装置、电子设备及存储介质

权利要求书

1.一种三维人脸建模方法，其特征在于，包括：

基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图；

对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型。

2.根据权利要求1所述的三维人脸建模方法，其特征在于，所述基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图，包括：

确定采集所述人脸视频流所用深度相机对应的建模角度需求；

从所述人脸视频流中选取所述人脸角度值符合所述建模角度需求的人脸深度图，作为所述关键深度图。

3.根据权利要求2所述的三维人脸建模方法，其特征在于，所述确定采集所述人脸视频流所用深度相机对应的建模角度需求，包括：

确定采集所述人脸视频流所用深度相机的成像质量；

基于所述成像质量确定所述建模角度需求。

4.根据权利要求1所述的三维人脸建模方法，其特征在于，所述人脸深度图的人脸角度值是基于如下步骤确定的：

对任一人脸深度图对应的人脸彩色图进行人脸特征提取，得到所述人脸彩色图包含目标人脸的多个特征点的二维坐标；

基于每个特征点的二维坐标，确定每个特征点在所述任一人脸深度图中的三维坐标；

基于每个特征点的二维坐标和三维坐标，确定所述任一人脸深度图的人脸角度值。

5.根据权利要求1所述的三维人脸建模方法，其特征在于，所述对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型，包括：

对每帧关键深度图的点云数据进行配准；

拼接配准后的每帧关键深度图的点云数据，得到人脸点云数据；

基于所述人脸点云数据，构建三维人脸模型。

6.根据权利要求1或5所述的三维人脸建模方法，其特征在于，所述对每帧关键深度图的点云数据进行配准，包括：

确定每帧关键深度图的点云数据中每个点的法线和/或曲率；

基于每两帧相邻关键深度图的点云数据中每个点的法线和/或曲率，对每两帧相邻关键深度图的点云数据进行配准。

7.根据权利要求1至5中任一项所述的三维人脸建模方法，其特征在于，所述人脸视频流是基于如下步骤确定的：

控制深度相机实时采集人脸视频流，同时每隔预设时间播报人员动作指令，所述人员动作指令包括人脸转动方向和/或人脸转动角度，所述人员动作指令用于提示人员根据所述人脸转动方向和/或人脸转动角度转动人脸。

8.一种三维人脸建模装置，其特征在于，包括：

关键帧选取单元，用于基于待建模的人脸视频流中每帧人脸深度图的人脸角度值，选取多帧人脸深度图作为关键深度图；

建模单元，用于对每帧关键深度图的点云数据进行配准，并基于配准后的每帧关键深度图的点云数据构建三维人脸模型。

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述三维人脸建模方法的步骤。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述三维人脸建模方法的步骤。