[发明专利]三维风格人脸的生成方法、装置、设备及存储介质

说明书

本发明公开了一种三维风格人脸的生成方法、装置、设备及存储介质。该方法包括：获取标注有人脸关键点的二维人脸图像，并根据人脸关键点构建与二维人脸图像中的真实人脸完全匹配的三维真实人脸；建立标准三维风格人脸的PCA模型与三维真实人脸的PCA模型之间的映射关系；根据映射关系对标准三维风格人脸进行调整，得到与二维人脸图像对应的三维风格人脸。本发明实施例的技术方案，可以基于单张图片，快速生成保留用户人脸特征信息的三维风格人脸。

技术领域

本发明涉及三维人脸重建技术领域，尤其涉及一种三维风格人脸的生成方法、装置、设备及存储介质。

背景技术

目前，直播应用通过构建虚拟互动空间和用户对应的三维虚拟形象，使得主播和观看用户可以使用三维虚拟形象在三维虚拟空间中进行互动。

三维虚拟形象可分为三维真实人脸和三维风格人脸，三维真实人脸的目标是贴近用户原本的形象，三维风格人脸的目标是将用户原本的形象卡通化一些。现有技术中，根据单张图片生成三维真实人脸的技术相对成熟，但生成三维风格人脸更多是依靠用户“手捏”。由于三维风格人脸可捏的维度太多，用户不好控制，因此很难做到三维风格人脸与用户相像。

发明内容

本发明提供了一种三维风格人脸的生成方法、装置、设备及存储介质，以解决用户“手捏”的三维风格人脸与用户人脸相似度低的问题。

根据本发明的一方面，提供了一种三维风格人脸的生成方法，包括：

获取标注有人脸关键点的二维人脸图像，并根据人脸关键点构建与二维人脸图像中的真实人脸完全匹配的三维真实人脸；

建立标准三维风格人脸的主成分分析(Principal Component Analysis，PCA)模型与三维真实人脸的PCA模型之间的映射关系；

根据映射关系对标准三维风格人脸进行调整，得到与二维人脸图像对应的三维风格人脸。

可选的，建立标准三维风格人脸的PCA模型与三维真实人脸的PCA模型之间的映射关系，包括：

建立标准三维风格人脸的PCA模型与三维真实人脸的PCA模型之间的PCA基映射关系以及幅度映射关系。

可选的，建立标准三维风格人脸的PCA模型与三维真实人脸的PCA模型之间的PCA基映射关系以及幅度映射关系，包括：

在标准三维风格人脸的PCA模型中，获取与目标人脸形状维度对应的第一PCA基以及第一PCA基的幅度值；

在三维真实人脸的PCA模型中，查询与目标人脸形状维度对应的第二PCA基以及第二PCA基的幅度值；

建立第一PCA基以及第一PCA基的幅度值与第二PCA基以及第二PCA基的幅度值之间的映射关系。

可选的，确定标准三维风格人脸的第一PCA基的幅度值，包括：

在标准三维风格人脸不畸形的情况下，获取第一PCA基的坐标最小值和坐标最大值；

将坐标最小值和坐标最大值的均值作为第一PCA基的幅度值。

可选的，根据映射关系对标准三维风格人脸进行调整，得到与二维人脸图像对应的三维风格人脸，包括：

将标准三维风格人脸中已建立映射关系的每个PCA基的人脸形状系数，更新为三维真实人脸中的对应PCA基的人脸形状系数；

将标准三维风格人脸中已建立映射关系的每个PCA基的幅度值，更新为三维真实人脸中的对应PCA基的幅度值；

将更新后的标准三维风格人脸作为与二维人脸图像对应的三维风格人脸。

可选的，在构建标准三维风格人脸的PCA模型与三维真实人脸的PCA模型之间的映射关系之前，还包括：