[发明专利]风格化对象的驱动方法及装置、介质和电子设备

说明书

本公开提供一种风格化对象的驱动方法、风格化对象的驱动装置、计算机可读介质和电子设备，涉及图像处理技术领域。该方法包括：在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；基于视频和风格化目标表情基对风格化中性目标对象进行驱动。本公开可以避免需要对不同风格化对象进行驱动时，需要设计师专门进行表情基设计的步骤，降低了设计成本；同时，可以实现“千人千面”的风格化对象的驱动，提升了驱动效果，增强了可拓展性和可移植性。

技术领域

本公开涉及图像处理技术领域，具体涉及一种风格化对象的驱动方法、风格化对象的驱动装置、计算机可读介质和电子设备。

背景技术

人脸的三维建模是一项十分重要的技术，在电影、游戏、虚拟现实、网络社交、人脸识别和追踪等场景中有着广泛应用。表情驱动是三维人脸重建的一个应用方向，通过设计参数化人脸模型、融合变形表情基和人脸重建等技术建立三维人脸模型。在完成三维人脸模型重建后，通常需要通过解算每帧图像的标签参数和位姿参数，以实时驱动人脸模型，使得三维人脸模型的形状、表情和位姿与输入图像一致。

然而，在相关驱动技术中，仅能进行真人人脸的表情驱动，或者固定卡通人脸等风格化人脸的驱动。如果需要对不同的风格化人脸进行驱动，则需要设计师专门针对每个风格化人脸进行融合变形表情基的设计，提高了设计成本；同时，若需新增风格化人脸，还行重新设计融合变形表情基，可拓展性和可移植性差。

发明内容

本公开的目的在于提供一种风格化对象方法、风格化对象装置、计算机可读介质和电子设备，进而至少在一定程度上降低设计成本，提高可拓展性和可移植性。

根据本公开的第一方面，提供一种风格化对象的驱动方法，包括：在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；其中，特征形变参数包括将中性预设对象转换为中性目标对象的形变参数；基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；其中，第一形变参数包括将中性预设对象转换为风格化中性预设对象的形变参数；基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；其中，第二形变参数包括将中性预设对象转换为风格化预设表情基的形变参数；基于视频和风格化目标表情基对风格化中性目标对象进行驱动。

根据本公开的第二方面，提供一种风格化对象的驱动装置，包括：参数确定模块，用于在包含目标对象的视频中截取目标对象为中性表情的中性目标对象，并基于中性目标对象计算特征形变参数；其中，特征形变参数包括将中性预设对象转换为中性目标对象的形变参数；风格化重建模块，用于基于中性预设对象、特征形变参数和第一形变参数重建风格化中性目标对象；其中，第一形变参数包括将中性预设对象转换为风格化中性预设对象的形变参数；表情基生成模块，用于基于中性预设对象、特征形变参数和第二形变参数生成风格化目标表情基；其中，第二形变参数包括将中性预设对象转换为风格化预设表情基的形变参数；对象驱动模块，用于基于视频和风格化目标表情基对风格化中性目标对象进行驱动。

根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述的方法。

根据本公开的第四方面，提供一种电子设备，其特征在于，包括：处理器；以及存储器，用于存储一个或多个程序，当一个或多个程序被一个或多个处理器执行时，使得一个或多个处理器实现上述的方法。