[发明专利]一种基于图像补全的唇形同步人脸伪造生成方法及系统有效
申请号: | 202210543484.9 | 申请日: | 2022-05-19 |
公开(公告)号: | CN114663962B | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 纪守领;包晗;王琴应;张旭鸿;王总辉;杨星 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V20/40;G06V10/774;G06V10/80;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 郑海峰 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于图像补全的唇形同步人脸伪造生成方法及系统,属于人工智能人脸生成领域。包括:获取人脸视频及对应的音频,将视频帧和音频帧对齐,提取多帧的人脸图像、头部姿态参数和梅尔频谱作为训练样本;对人脸图像进行预处理,生成擦除嘴部后的面部图像;对人脸伪造生成模型进行训练,利用训练好的人脸伪造生成模型,生成针对特定音频下嘴部动作的伪造人脸图像。本发明在面部生成时采用了图像补全的技术,在只修改嘴部的前提下生成因人物表达内容不一致造成的嘴部差异。相较于传统的人脸伪造生成方法,本发明提供了唇形同步功能,在视频和音频结合上进行伪造生成,且不修改面部或背景的其余位置,能够达到更逼真的伪造效果。 | ||
搜索关键词: | 一种 基于 图像 形同 步人脸 伪造 生成 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210543484.9/,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序