[发明专利]动画驱动方法、装置、电子设备及存储介质

说明书

本申请公开了动画驱动方法、装置、电子设备及存储介质，涉及图像处理技术领域、深度学习技术领域。具体实现方案为：将待处理的人脸图像输入依次排列的特征提取子模型和头部姿态子模型，以获取人脸图像的头部姿态；将人脸图像输入依次排列的特征提取子模型、部位特征提取子模型以及部位组合子模型，以获取人脸图像的表情系数；结合人脸图像的头部姿态、表情系数以及人脸动画模型，生成与人脸图像姿态表情一致的人脸动画图像。由此，能够使得误差在人脸各个部位均匀分布，避免出现参数震荡现象，提高人脸动画图像的生成效果。

技术领域

本申请涉及计算机技术领域，具体涉及图像处理技术领域、深度学习技术领域，尤其涉及动画驱动方法、装置、电子设备及存储介质。

背景技术

目前的三维人脸动画驱动方案主要为，首先在离线阶段，基于三维通用人脸模型构建多个表情模型，然后通过人工选点标注这些表情模型的三维关键点作为主成分，之后在运行期间采用人脸关键点检测模块提取二维人脸稀疏关键点，同时构建最小重投影误差函数来优化各个主成分的参数，最后驱动参数化人脸三维模型。

上述方案中，构建最小重投影误差函数来优化各个主成分的参数，导致误差在人脸各个部位分布不均匀，容易出现参数震荡现象，例如人脸“抽搐”。

发明内容

提供了一种动画驱动方法、装置、电子设备及存储介质。

根据第一方面，提供了一种动画驱动方法，通过将待处理的人脸图像输入依次排列的特征提取子模型和头部姿态子模型，以获取所述人脸图像的头部姿态；将人脸图像输入依次排列的特征提取子模型、部位特征提取子模型以及部位组合子模型，以获取人脸图像的表情系数；结合人脸图像的头部姿态、表情系数以及人脸动画模型，生成与人脸图像姿态表情一致的人脸动画图像。由此，通过部位特征提取子模型以及部位组合子模型的采用，根据人脸特征分别确定人脸各个部位的特征，进而根据人脸各个部位的特征组合确定表情系数，能够使得误差在人脸各个部位均匀分布，避免出现参数震荡现象，提高人脸动画图像的生成效果。

本申请第二方面，提供一种动画驱动装置。

本申请第三方面，提出一种电子设备。

本申请第四方面，提出一种存储有计算机指令的非瞬时计算机可读存储介质。

本申请第一方面实施例提出一种动画驱动方法，包括：获取待处理的人脸图像；将所述人脸图像输入依次排列的特征提取子模型和头部姿态子模型，以获取所述人脸图像的头部姿态；将所述人脸图像输入依次排列的特征提取子模型、部位特征提取子模型以及部位组合子模型，以获取所述人脸图像的表情系数；以及，结合所述人脸图像的所述头部姿态、所述表情系数以及人脸动画模型，生成与所述人脸图像姿态表情一致的人脸动画图像。

本申请实施例的动画驱动方法，通过将待处理的人脸图像输入依次排列的特征提取子模型和头部姿态子模型，以获取所述人脸图像的头部姿态；将人脸图像输入依次排列的特征提取子模型、部位特征提取子模型以及部位组合子模型，以获取人脸图像的表情系数；结合人脸图像的头部姿态、表情系数以及人脸动画模型，生成与人脸图像姿态表情一致的人脸动画图像。由此，通过部位特征提取子模型以及部位组合子模型的采用，根据人脸特征分别确定人脸各个部位的特征，进而根据人脸各个部位的特征组合确定表情系数，能够使得误差在人脸各个部位均匀分布，避免出现参数震荡现象，提高人脸动画图像的生成效果。

本申请第二方面实施例提出一种动画驱动装置，包括：第一获取模块，用于获取待处理的人脸图像；第二获取模块，用于将所述人脸图像输入依次排列的特征提取子模型和头部姿态子模型，以获取所述人脸图像的头部姿态；第三获取模块，用于将所述人脸图像输入依次排列的特征提取子模型、部位特征提取子模型以及部位组合子模型，以获取所述人脸图像的表情系数；以及，生成模块，用于结合所述人脸图像的所述头部姿态、所述表情系数以及人脸动画模型，生成与所述人脸图像姿态表情一致的人脸动画图像。