[发明专利]换脸方法、装置、电子设备和存储介质

说明书

本发明提供一种换脸方法、装置、电子设备和存储介质，其中方法包括：确定源人脸图像和目标人脸图像；将源人脸图像和目标人脸图像输入至人脸生成器中，得到人脸生成器输出的换脸图像；人脸生成器是基于样本图像对，与人脸判别器对抗训练得到的，人脸判别器用于对样本图像对及其样本换脸图像进行真伪判别，样本换脸图像是人脸生成器基于样本图像对进行换脸得到的。本发明提供的方法、装置、电子设备和存储介质，结合人脸判别器训练所得的人脸生成器，具有较强的泛化性能，可以适配任意人脸图像，无身份限制。且人脸生成器的训练样本也不需要大量相同身份的人脸图像，能够有效降低样本获取难度和获取成本，进一步提高换脸方法的适用范畴。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种换脸方法、装置、电子设备和存储介质。

背景技术

换脸是指将人脸从源人脸图像转移到目标人脸图像，同时保留目标人脸图像的属性，如姿态、表情、光照等。

近年来，随着人脸合成技术的快速发展，换脸技术取得了巨大进展。换脸需要将身份信息与属性信息分离，然后将它们重组以得到交换后的人脸图像。

目前的换脸方法通常需要大量相同身份的人脸图像进行建模，才能实现身份信息与属性信息的解耦，如此以来导致目前的换脸方法极难适用于任意的人脸图像，直接影响了换脸技术的应用。

发明内容

本发明提供一种换脸方法、装置、电子设备和存储介质，用以解决现有技术中换脸需要大量相同身份的人脸图像，实用性差的缺陷。

本发明提供一种换脸方法，包括：

确定源人脸图像和目标人脸图像；

将所述源人脸图像和目标人脸图像输入至人脸生成器中，得到所述人脸生成器输出的换脸图像；

所述人脸生成器是基于样本图像对，与人脸判别器对抗训练得到的，所述人脸判别器用于对所述样本图像对及其样本换脸图像进行真伪判别，所述样本换脸图像是所述人脸生成器基于所述样本图像对进行换脸得到的。

根据本发明提供的一种换脸方法，所述人脸生成器包括解耦表示模块和语义融合模块；

所述将所述源人脸图像和目标人脸图像输入至人脸生成器中，得到所述人脸生成器输出的换脸图像，包括：

将所述源人脸图像和目标人脸图像输入至所述解耦表示模块，得到所述解耦表示模块输出的所述源人脸图像的身份编码和所述目标人脸图像的属性编码；

将所述源人脸图像的身份编码和所述目标人脸图像的属性编码输入至所述语义融合模块，由所述语义融合模块基于所述目标人脸图像的语义信息，融合所述源人脸图像的身份编码和所述目标人脸图像的属性编码，得到所述语义融合模块输出的所述换脸图像。

根据本发明提供的一种换脸方法，所述语义信息包括人脸语义分割图和/或人脸关键点图。

根据本发明提供的一种换脸方法，所述将所述源人脸图像的身份编码和所述目标人脸图像的属性编码输入至所述语义融合模块，由所述语义融合模块基于所述目标人脸图像的语义信息，融合所述源人脸图像的身份编码和所述目标人脸图像的属性编码，得到所述语义融合模块输出的所述换脸图像，包括：

将所述源人脸图像的身份编码和所述目标人脸图像的属性编码输入至所述语义融合模块，由所述语义融合模块基于反归一化方式顺次将所述目标人脸图像的人脸语义分割图的编码、所述源人脸图像的身份编码，以及所述目标人脸图像的人脸关键点图的编码，注入所述目标人脸图像的属性编码，得到所述语义融合模块输出的换脸图像。

根据本发明提供的一种换脸方法，所述人脸生成器是基于如下步骤确定的：

将所述样本图像对输入至初始生成器中，得到所述初始生成器输出的重建图像对和换脸图像对；