[发明专利]基于对抗网络的人脸生成图片替换方法及系统在审
| 申请号： | 201910802427.6 | 申请日： | 2019-08-28 |
| 公开（公告）号： | CN110503601A | 公开（公告）日： | 2019-11-26 |
| 发明（设计）人： | 孙锬锋;蒋兴浩;徐源;许可 | 申请（专利权）人： | 上海交通大学 |
| 主分类号： | G06T3/00 | 分类号： | G06T3/00;G06T5/50 |
| 代理公司： | 31236 上海汉声知识产权代理有限公司 | 代理人： | 胡晶<国际申请>=<国际公布>=<进入国 |
| 地址： | 200240 *** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了一种基于对抗网络的人脸生成图片替换方法及系统，包括：建立人物A和B的图片集，识别并提取出面部数据，训练过程中，A和B共用一个编码器，拥有各自的解码器和判别器。首先通过编码器将A和B的脸部数据压缩到隐空间，再通过解码器还原出原来的脸部数据，同时使用判别器来约束人脸的还原和生成。最后得到训练好的人脸特征模型，包含五项内容：编码器、解码器a、解码器b、判别器a、判别器b。对输入的待替换人脸图片，截取面部数据，再利用对方的解码器进行目标人脸的翻译生成，然后通过后处理实现人脸与原图的融合，最终得到替换结果。本发明填补了结合自编码器和生成式对抗网络进行人脸替换的空白，支持多分辨率的人脸生成。 | ||
| 搜索关键词： | 解码器 人脸 编码器 判别器 替换 脸部数据 面部数据 还原 后处理 多分辨率 目标人脸 人脸特征 人脸图片 图片替换 训练过程 对抗 生成式 再利用 截取 网络 填补 翻译 压缩 融合 图片 | ||
【主权项】：
1.一种基于对抗网络的人脸生成图片替换方法，其特征在于，包括如下步骤：/n步骤1，获取人物A和B的包含人脸的图片数据集；/n步骤2，通过MTCNN对数据集进行清洗，提取出脸部数据；/n步骤3，随机进行数据增强后，获得用于训练生成时对抗网络的样本数据；/n步骤4，用预处理后的脸部图片样本训练生成对抗网络模型，得到用于实现人脸生成的生成对抗网络N；/n步骤5，对实时输入的待替换图片进行人脸的提取，通过仿射变换进行人脸对齐，得到待替换脸部图片；/n步骤6，载入步骤3训练好的网络N，将步骤4中得到的待替换脸部图片输入到该网络，生成目标人脸的脸部图片；/n步骤7，对于步骤5中得到的目标人脸的脸部图片，通过后处理的图片融合算法进行脸部图片和原始图片的融合；/n步骤8，待替换图片经过步骤4至步骤6，就可以完成目标人脸的生成和图片间的融合，最终输出替换好的人脸图片。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海交通大学，未经上海交通大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910802427.6/，转载请声明来源钻瓜专利网。
