[发明专利]人脸图像处理方法、装置、电子设备及存储介质

说明书

本公开关于一种人脸图像处理方法、装置、电子设备及存储介质，该方法包括：获取空间变换信息、人脸图像对应的人脸位姿变化信息、人脸图像中的牙齿在人脸图像中对应的牙齿位置信息，以及牙齿对应的三维牙齿模型在三维坐标系中对应的初始牙齿位姿信息；基于第一预设约束条件，对牙齿位置信息对应的目标位置误差进行约束分析，得到三维牙齿模型相对于三维人脸模型的第一牙齿位姿变化信息；基于第一牙齿位姿变化信息和人脸位姿变化信息，对初始牙齿位姿信息进行偏移，得到目标牙齿位姿信息。利用本公开实施例可以实现在重建的三维人脸表现真实人脸的牙齿信息。

技术领域

本公开涉及计算机技术领域，尤其涉及一种人脸图像处理方法、装置、电子设备及存储介质。

背景技术

随着计算机视觉、计算机图形学以及人工智能技术的不断发展，人脸图像特效得到广泛应用，比如虚拟人、人脸表情特效等多种应用。

相关技术中，计算机设备会对输入的人脸图像进行检测，并基于对人脸图像的检测结果重建三维人脸，从而实现表情特效的添加。比如，在短视频、直播场景中，为主播添加相关的头饰等特效。

然而，相关技术中，重建出的三维人脸缺少牙齿信息。

发明内容

本公开提供一种人脸图像处理方法、装置、电子设备及存储介质，以至少解决相关技术中重建出的三维人脸缺少牙齿信息的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种人脸图像处理方法，所述方法包括：

获取空间变换信息、人脸图像对应的人脸位姿变化信息、所述人脸图像中的牙齿在所述人脸图像中对应的牙齿位置信息，以及所述牙齿对应的三维牙齿模型在三维坐标系中对应的初始牙齿位姿信息；所述空间变换信息表征所述人脸图像对应的二维坐标系与所述三维坐标系之间的坐标系变换关系，所述人脸位姿变化信息表征所述人脸图像对应的三维人脸模型在所述三维坐标系中的位姿变化情况；

基于第一预设约束条件，对所述牙齿位置信息对应的目标位置误差进行约束分析，得到所述三维牙齿模型相对于所述三维人脸模型的第一牙齿位姿变化信息；其中，所述第一预设约束条件是指约束所述目标位置误差达到最小值的条件，所述目标位置误差为所述牙齿位置信息与第一预测牙齿位置信息之间的误差，所述第一预测牙齿位置信息为基于所述空间变换信息将所述牙齿在所述三维坐标系中对应的第一牙齿位姿信息转换到所述二维坐标系后对应的二维牙齿位置信息，所述第一牙齿位姿信息是基于所述第一牙齿位姿变化信息和所述人脸位姿变化信息对所述初始牙齿位姿信息进行偏移后的牙齿位姿信息，所述第一牙齿位姿变化信息是在所述目标位置误差达到最小值的情况下确定的；

基于所述第一牙齿位姿变化信息和所述人脸位姿变化信息，对所述初始牙齿位姿信息进行偏移，得到目标牙齿位姿信息，所述目标牙齿位姿信息用于表征牙齿特效对应的添加位置。

在一些可能的设计中，所述牙齿包括上牙，所述三维牙齿模型包括所述上牙对应的上颌骨牙齿模型，所述初始牙齿位姿信息包括初始上牙位姿信息，所述牙齿位置信息包括上牙位置信息，所述基于第一预设约束条件，对所述牙齿位置信息对应的目标位置误差进行约束分析，得到所述三维牙齿模型相对于所述三维人脸模型的第一牙齿位姿变化信息，包括：

基于所述第一预设约束条件，对所述上牙位置信息对应的上牙位置误差进行约束分析，得到所述上颌骨牙齿模型相对于所述三维人脸模型的上颌骨位姿变化信息；

其中，所述第一牙齿位姿变化信息包括所述上颌骨位姿变化信息，所述目标位置误差包括所述上牙位置误差，所述上牙位置误差为所述上牙位置信息与预测上牙位置信息之间的误差，所述预测上牙位置信息为基于所述空间变换信息将所述上牙在所述三维坐标系中对应的目标上牙位姿信息转换到所述二维坐标系后对应的二维上牙位置信息，所述目标上牙位姿信息是基于所述上颌骨位姿变化信息和所述人脸位姿变化信息对所述初始上牙位姿信息进行偏移后的上牙位姿信息，所述上颌骨位姿变化信息是在所述上牙位置误差达到最小值的情况下确定的。