[发明专利]一种妆容迁移的控制方法、系统和存储介质

权利要求书

1.一种妆容迁移的控制方法，其特征在于，包括以下步骤：

获取无妆容图像、第一有妆容参考图像和第二有妆容参考图像；

将所述无妆容图像、所述第一有妆容参考图像和所述第二有妆容参考图像输入特征编码网络，得到若干个部位特征向量；

对所述若干个部位特征向量进行拼接，得到第一拼接特征向量和第二拼接特征向量；

将所述第一拼接特征向量和所述无妆容图像输入生成器，得到第一生成图像，并通过第一局部判别器判断所述第一生成图像的真假信息以及所述第一生成图像是否满足所述第一拼接特征向量的条件；

将所述第一生成图像和所述第二拼接特征向量输入生成器，得到第二生成图像，并通过第二局部判别器判断所述第二生成图像的真假信息以及所述第二生成图像是否满足所述第二拼接特征向量的条件；

当所述真假信息符合预设要求、所述第一生成图像满足所述第一拼接特征向量的条件且所述第二生成图像满足所述第二拼接特征向量的条件，确定完成妆容迁移。

2.根据权利要求1所述的一种妆容迁移的控制方法，其特征在于，所述局部判别器包括六个卷积层、谱归一化层和ReLU层，所述第一局部判别器和第二局部判别器的处理过程包括以下步骤：

接收有妆容图像裁剪图、无妆容图像裁剪图和生成图像裁剪图；

对所述无妆容图像裁剪图和所述生成图像裁剪图沿着颜色通道连接，得到消极对图像；

对所述有妆容图像裁剪图和所述生成图像裁剪图沿着颜色通道连接，得到积极对图像；

根据所述消极对图像和所述积极对图像对局部判别器进行对抗性性学习。

3.根据权利要求1所述的一种妆容迁移的控制方法，其特征在于，在执行所述将所述第一拼接特征向量和所述无妆容图像输入生成器，得到第一生成图像这一步骤时，计算所述第一拼接特征向量和所述无妆容图像的身份感知损失，所述身份感知损失计算公式如下：

其中，L_per表示身份感知损失，C_l表示生成器网络的第l层的特征图通道数，H_l表示生成器网络的第l层的特征图高度，W_l表示生成器网络的第l层的特征图宽度，E_l表示特征的欧式距离。

4.根据权利要求1所述的一种妆容迁移的控制方法，其特征在于，在执行所述将所述第一拼接特征向量和所述无妆容图像输入生成器，得到第一生成图像这一步骤时，通过语义分割网络对所述第一拼接特征向量、所述第一有妆容参考图像和所述第二有妆容参考图像进行语义分割，得到组合掩膜图像。

5.根据权利要求4所述的一种妆容迁移的控制方法，其特征在于，所述方法还包括以下步骤：

计算所述组合掩膜图像的妆容损失，所述妆容损失计算公式如下：

L_makeup＝λ_lL_lips+λ_sL_shadow+λ_fL_face

其中，L_makeup表示妆容损失，λ_l表示嘴部的损失权重，λ_s表示眼部的损失权重，λ_f表示脸部的损失权重，L_lips表示嘴部的妆容损失，L_shadow表示眼部的妆容损失，L_face表示脸部的妆容损失。

6.根据权利要求1所述的一种妆容迁移的控制方法，其特征在于，在执行所述将所述第一生成图像和所述第二拼接特征向量输入生成器，得到第二生成图像，计算所述第二生成图像和所述无妆容图像的循环一致性损失，所述循环一致性损失通过以下公式计算：

L_cyc＝E_x,L1,L2[||x-G(G(x,L1),L2)||₁]

其中，L_cyc表示循环一致性损失，E表示特征编码网络，G表示生成器，L1表示第一拼接特征向量，L2表示第二拼接特征向量，x表示无妆容图像。