[发明专利]虚拟人物表情的驱动方法、装置、电子设备和存储介质

说明书

本申请公开了虚拟人物表情的驱动方法、装置、电子设备和存储介质，涉及人工智能技术领域，具体为增强现实、虚拟现实、计算机视觉、深度学习等技术领域，可应用于元宇宙、虚拟数字人等场景。具体方案为：获取人脸图像，并将人脸图像输入到三维人脸模型中，得到人脸图像对应的第一人脸状态向量；将第一人脸状态向量输入到系数映射模型，得到人脸图像的多个第一混合变形分别对应的系数；根据多个第一混合变形分别对应的系数，确定虚拟人物的多个第二混合变形分别对应的系数；根据多个第二混合变形分别对应的系数，对虚拟人物的表情进行驱动。该方法提高了表情捕捉的准确性，提高了对虚拟人物表情驱动的准确性，及提高了虚拟人物的表现力。

技术领域

本申请涉及人工智能技术领域，具体为增强现实、虚拟现实、计算机视觉、深度学习等技术领域，可应用于元宇宙、虚拟数字人等场景，具体涉及一种虚拟人物表情的驱动方法、装置、电子设备和存储介质。

背景技术

随着人工智能技术的发展，三维虚拟人物的应用场景越来越多。三维面部表情捕捉技术是三维虚拟人物中的一个重要技术之一，其任务是获取人脸表情，并将人脸表情迁移至虚拟人物上，实现虚拟人物的表情可控。因此，表情捕捉的准确性至关重要。

发明内容

本申请提供了一种虚拟人物表情的驱动方法、装置、电子设备和存储介质。具体方案如下：

根据本申请的一方面，提供了一种虚拟人物表情的驱动方法，包括：

获取人脸图像，并将人脸图像输入到三维人脸模型中，以得到人脸图像对应的第一人脸状态向量；

将第一人脸状态向量输入到系数映射模型中，以得到人脸图像对应的多个第一混合变形分别对应的系数，其中，所述第一混合变形是指用于组成人脸表情的三维模型；

根据多个第一混合变形分别对应的系数，确定虚拟人物的多个第二混合变形分别对应的系数，其中，所述第二混合变形是指用于组成所述虚拟人物表情的三维模型；

根据多个第二混合变形分别对应的系数，对虚拟人物的表情进行驱动。

根据本申请的另一方面，提供了一种虚拟人物表情的驱动装置，包括：

第一获取模块，用于获取人脸图像，并将人脸图像输入到三维人脸模型中，以得到人脸图像对应的第一人脸状态向量；

第二获取模块，用于将第一人脸状态向量输入到系数映射模型中，以得到人脸图像对应的多个第一混合变形分别对应的系数，其中，所述第一混合变形是指用于组成人脸表情的三维模型；

确定模块，用于根据多个第一混合变形分别对应的系数，确定虚拟人物的多个第二混合变形分别对应的系数，其中，所述第二混合变形是指用于组成所述虚拟人物表情的三维模型；

驱动模块，用于根据多个第二混合变形分别对应的系数，对虚拟人物的表情进行驱动。

根据本申请的另一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述实施例所述的方法。

根据本申请的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据上述实施例所述的方法。

根据本申请的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现上述实施例所述方法的步骤。

应当理解，本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征，也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。