[发明专利]人脸转换模型训练方法、装置、设备及介质在审
申请号: | 201910343205.2 | 申请日: | 2019-04-26 |
公开(公告)号: | CN111860041A | 公开(公告)日: | 2020-10-30 |
发明(设计)人: | 周润楠;郑天祥;覃威宁;张涛;王志浩;张少龙;段英伦 | 申请(专利权)人: | 北京陌陌信息技术有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06T3/00;G06T9/00 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 彭琼 |
地址: | 100102 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 转换 模型 训练 方法 装置 设备 介质 | ||
本发明实施例提供了人脸转换模型训练方法、装置、设备及介质,本发明实施例通过在人脸图像集中随机选取一个人脸图像输入至预设的人脸转换神经网络中,提取特征向量;基于特征向量和人脸转换神经网络中保存的目标人脸图像,生成换脸图像;计算与换脸图像和目标人脸图像的损失值;判断损失值是否达到预设条件;基于损失值调整人脸转换神经网络的参数;在剩余的人脸图像中随机选取一个人脸图像,输入至调整过参数的人脸转换神经网络中,提取特征向量;生成人脸转换模型。能够基于多个不同人物的人脸图像对人脸转换神经网络进行训练,进而能够得到人脸转换模型,该人脸转换模型能够提高人脸转换的处理速度。
技术领域
本发明涉及数字图像处理技术领域,尤其涉及一种人脸转换模型训练方法、装置、设备及介质。
背景技术
人脸转换是计算机视觉领域中一个比较热门的应用,人脸转换一般可以用于视频合成、提供隐私服务、肖像更换或者其他有创新性的应用。
目前,人工智能(Artificial Intelligence,AI)技术在人脸转换上的应用得到了广泛的关注。其中,基于深度换脸(Deepfake)原理,通过训练神经网络模型实现点对点式人脸转换,即,仅能训练神经模型从A转换为B,其中,A和B是不会发生改变的。若A或B发生了改变,神经网络模型就需要重新进行训练学习。
因此,点对点式人脸转换在处理多个不同人脸的时候,处理速度慢,效率低。
发明内容
本发明实施例提供了一种人脸转换模型训练方法、装置、设备及介质,能够基于多个不同人物的人脸图像对人脸转换神经网络进行训练,进而能够得到人脸转换模型,该人脸转换模型能够提高人脸转换的处理速度。
第一方面,本发明实施例提供了一种人脸转换模型训练方法,方法包括:
获取人脸图像集;所述人脸图像集包括多个不同人物的人脸图像;
执行下述迭代操作:
S101,在所述人脸图像集中随机选取一个人脸图像输入至预设的人脸转换神经网络中,提取特征向量,执行S102;
S102,基于所述特征向量和所述人脸转换神经网络中保存的目标人脸图像,生成换脸图像,执行S103;
S103,计算与所述换脸图像和所述目标人脸图像的损失值,执行S104;
S104,判断所述损失值是否达到预设条件;若是,则执行S107;若否,则执行S105;
S105,基于损失值调整所述人脸转换神经网络的参数,执行S106;
S106,在剩余的人脸图像中随机选取一个人脸图像,输入至调整过参数的人脸转换神经网络中,提取特征向量,执行S102;
S107,生成人脸转换模型;其中所述预设的人脸转换神经网络由通用编码器和多个解码器构成。
根据本发明实施例的提供的人脸转换模型训练方法,所述人脸转换神经网络中保存有多个解码器;
所述基于所述特征向量和所述人脸转换神经网络中保存的目标人脸图像,生成换脸图像,包括:
将所述特征向量分别输入至解码器中;
基于每一个所述解码器中保存的目标人脸图像和所述特征向量,生成多个换脸图像;其中,每一个解码器中保存的目标人脸图像为不同目标人物的人脸图像。
根据本发明实施例的提供的人脸转换模型训练方法,所述人脸转换神经网络中保存有多个解码器;所述换脸图像与所述解码器一一对应;
所述计算与所述换脸图像和所述目标人脸图像的损失值,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京陌陌信息技术有限公司,未经北京陌陌信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910343205.2/2.html,转载请声明来源钻瓜专利网。