[发明专利]虚拟人物表情的驱动方法、装置、电子设备和存储介质

权利要求书

1.一种虚拟人物表情的驱动方法，包括：

获取人脸图像，并将所述人脸图像输入到三维人脸模型中，以得到所述人脸图像对应的第一人脸状态向量；

将所述第一人脸状态向量输入到系数映射模型中，以得到所述人脸图像对应的多个第一混合变形分别对应的系数，其中，所述第一混合变形是指用于组成人脸表情的三维模型，其中，人脸表情由多个第一混合变形与所述系数的加权组合表示；

根据所述多个第一混合变形分别对应的系数，确定虚拟人物的多个第二混合变形分别对应的系数，其中，所述第二混合变形是指用于组成所述虚拟人物表情的三维模型；

根据所述多个第二混合变形分别对应的系数，对所述虚拟人物的表情进行驱动；

所述根据所述多个第一混合变形分别对应的系数，确定虚拟人物的多个第二混合变形分别对应的系数，包括：

获取所述多个第一混合变形与所述多个第二混合变形之间的对应关系；

根据所述对应关系，确定所述多个第二混合变形中与每个所述第一混合变形关联的多个第二混合变形；

根据每个所述第一混合变形的系数，确定所述关联的多个第二混合变形的系数；

还包括：

根据所述多个第一混合变形的语义及所述多个第二混合变形的语义，确定所述多个第二混合变形中与每个所述第一混合变形关联的第二混合变形；

根据每个所述第一混合变形的系数，确定所述关联的第二混合变形的系数。

2.如权利要求1所述的方法，其中，所述根据所述多个第一混合变形的语义及所述多个第二混合变形的语义，确定所述多个第二混合变形中与每个所述第一混合变形关联的第二混合变形，包括：

根据所述多个第一混合变形的语义及所述多个第二混合变形的语义，确定每个所述第一混合变形分别与所述多个第二混合变形之间的语义匹配度；

根据每个所述第一混合变形对应的多个语义匹配度，确定与每个所述第一混合变形关联的第二混合变形。

3.如权利要求1所述的方法，其中，所述根据所述多个第一混合变形的语义及所述多个第二混合变形的语义，确定所述多个第二混合变形中与每个所述第一混合变形关联的第二混合变形，包括：

根据每个所述第一混合变形的语义，确定每个所述第一混合变形关联的人脸区域；

根据每个所述第二混合变形的语义，确定每个所述第二混合变形关联的人脸区域；

将每个所述第一混合变形关联的人脸区域分别与所述多个第二混合变形关联的人脸区域进行比对；

将所述多个第二混合变形中与每个所述第一混合变形关联的人脸区域相同的第二混合变形，确定为所述关联的第二混合变形。

4.如权利要求1-3任一项所述的方法，其中，所述根据每个所述第一混合变形的系数，确定所述关联的第二混合变形的系数，包括：

获取每个所述第一混合变形对应的系数映射规则；

根据所述系数映射规则及每个所述第一混合变形的系数，确定所述关联的第二混合变形的系数。

5.如权利要求1-3任一项所述的方法，其中，所述根据每个所述第一混合变形的系数，确定所述关联的第二混合变形的系数，包括：

获取每个所述第二混合变形的系数调整规则；

将每个所述第一混合变形的系数，确定为所述关联的第二混合变形的初始系数；

根据所述关联的第二混合变形的系数调整规则，对所述关联的第二混合变形的初始系数进行调整，以确定所述关联的第二混合变形的系数。

6.如权利要求1所述的方法，其中，所述系数映射模型通过以下步骤训练得到：

获取人脸样本图像及所述人脸样本图像对应的所述多个第一混合变形分别对应的标注系数；

将所述人脸样本图像输入到所述三维人脸模型中，得到所述人脸样本图像对应的第二人脸状态向量；

将所述第二人脸状态向量输入到初始系数映射模型中，以得到所述人脸样本图像对应的所述多个第一混合变形分别对应的预测系数；

根据所述预测系数与所述标注系数之间的差异，对所述初始系数映射模型进行训练，以得到所述系数映射模型。