[发明专利]面部表情重建方法、终端设备及计算机可读存储介质

说明书

本申请适用于图像处理技术领域，提供了一种面部表情重建方法、装置、终端设备及计算机可读存储介质，包括：根据第一目标人脸的第一人脸图像生成包含所述第一目标人脸的面部表情特征的第一位移贴图，其中，所述第一人脸图像中的所述第一目标人脸具有预设面部表情；根据所述第一目标人脸的第二人脸图像生成所述第一目标人脸的初始三维模型，其中，所述第二人脸图像中的所述第一目标人脸不具有所述预设面部表情；根据所述第一位移贴图和所述第一目标人脸的初始三维模型，生成所述第一目标人脸的最终三维模型。通过上述方法，可以有效提高面部表情重建结果的精确度。

技术领域

本申请属于图像处理技术领域，尤其涉及一种面部表情重建方法、装置、终端设备及计算机可读存储介质。

背景技术

随着深度学习的发展，三维人脸重建技术成为一个研究热点，受到了研究者广泛的关注。三维人脸重建是指，根据被测个体的二维人脸图像重建出其三维人脸模型。

现有的三维人脸重建技术，通常使用固定的线性形状空间估计三维人脸模型。这类方法只能捕获人脸的低频形状信息，无法精确捕捉人脸的细节特征，导致过渡平滑，重建效果较差。

发明内容

本申请实施例提供了一种面部表情重建方法、装置、终端设备及计算机可读存储介质，可以有效提高面部表情重建结果的精确度。

第一方面，本申请实施例提供了一种面部表情重建方法，包括：

根据第一目标人脸的第一人脸图像生成包含所述第一目标人脸的面部表情特征的第一位移贴图，其中，所述第一人脸图像中的所述第一目标人脸具有预设面部表情；

根据所述第一目标人脸的第二人脸图像生成所述第一目标人脸的初始三维模型，其中，所述第二人脸图像中的所述第一目标人脸不具有所述预设面部表情；

根据所述第一位移贴图和所述第一目标人脸的初始三维模型，生成所述第一目标人脸的最终三维模型。

本申请实施例中，第二人脸图像中的第一目标人脸不具有预设面部表情，根据第二人脸图像生成第一目标人脸的初始三维模型，相当于对第一目标人脸进行粗粒度重建；第一人脸图像中的第一目标人脸具有预设面部表情，生成的第一位移贴图中包含第一目标人脸的面部表情特征，相当于获取到了第一目标人脸的面部动作细节；根据第一位移贴图和第一目标人脸的初始三维模型生成第一目标人脸的最终三维模型，相当于在对第一目标人脸进行粗粒度重建的基础上，添加了第一目标人脸的细节特征。换言之，上述面部表情重建方法，既关注了人脸的全局特征，又关注了人脸的局部特征，使得最终三维模型能够更加精确地表征第一目标人脸。

在第一方面的一种可能的实现方式中，所述根据第一目标人脸的第一人脸图像生成包含所述第一目标人脸的面部表情特征的第一位移贴图，包括：

对所述第一人脸图像进行面部表情检测，获得第一特征数据；

将所述第一特征数据输入训练后的第一模型，获得所述第一位移贴图。

在第一方面的一种可能的实现方式中，在将所述第一特征数据输入训练后的第一模型，获得所述第一位移贴图之前，所述方法还包括：

根据第二目标人脸的第三人脸图像生成包含所述第二目标人脸的面部表情特征的第二位移贴图，其中，所述第三人脸图像中的所述第二目标人脸具有所述预设面部表情；

根据第二目标人脸的第四人脸图像生成所述第二目标人脸的初始三维模型，其中，所述第四人脸图像中的所述第二目标人脸不具有所述预设面部表情；

根据所述第二位移贴图和所述第二目标人脸的初始三维模型，生成所述第二目标人脸的最终三维模型；

根据所述第二目标人脸的最终三维模型生成所述第二目标人脸的二维绘制图像；

根据所述第二目标人脸的二维绘制图像和所述第三人脸图像计算第一损失值；