[发明专利]图像处理方法及相关设备、迁移网络训练方法及相关设备在审
申请号: | 202110886585.1 | 申请日: | 2021-08-03 |
公开(公告)号: | CN113658324A | 公开(公告)日: | 2021-11-16 |
发明(设计)人: | 王顺飞 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T19/20 |
代理公司: | 广州德科知识产权代理有限公司 44381 | 代理人: | 蔡丽妮;万振雄 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 处理 方法 相关 设备 迁移 网络 训练 | ||
1.一种图像处理方法,其特征在于,所述方法包括:
分别提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像包含的脸部的目标风格关键点信息;所述目标风格图像的图像风格是所述待处理图像需要迁移的目标风格;
通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移,得到目标迁移关键点信息;所述关键点迁移网络是利用原始样本图像,以及至少两种图像风格的风格引导图像进行训练得到的;
对所述待处理图像中的脸部进行三维重建,得到待处理三维模型;
利用所述待处理关键点信息和所述目标迁移关键点信息对所述待处理三维模型进行调整,得到所述目标风格的目标三维模型。
2.根据权利要求1所述的方法,其特征在于,所述风格引导图像和所述原始样本图像包含的脸部不相同。
3.根据权利要求1所述的方法,其特征在于,所述通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移,得到目标迁移关键点信息,包括:
通过所述关键点迁移网络从所述待处理关键点信息中提取出待处理脸部特征;
通过所述关键点迁移网络从所述目标风格关键点信息中提取出目标风格特征;
通过所述关键点迁移网络将所述待处理脸部特征与所述目标风格特征进行融合,得到目标融合特征,并对所述目标融合特征进行还原,得到目标迁移关键点信息。
4.根据权利要求1所述的方法,其特征在于,在所述分别提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像中包含的脸部的目标风格关键点信息之前,所述方法还包括:
分别对待处理图像和目标风格图像进行脸部检测,从所述待处理图像中提取出第一脸部区域,以及从所述目标风格图像中提取出第二脸部区域;
以及,所述提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像中包含的脸部的目标风格关键点信息,包括:
分别对所述第一脸部区域和所述第二脸部区域进行脸部关键点识别,得到从所述第一脸部区域提取出的待处理关键点信息,以及从所述第二脸部区域提取出的目标风格关键点信息。
5.一种迁移网络训练方法,其特征在于,所述方法包括:
从样本数据中选取原始样本图像和第一风格引导图像;所述样本数据包括所述原始样本图像,以及至少两种不同图像风格的风格引导图像,第一风格引导图像为具备第一风格的图像,所述第一风格为所述至少两种不同图像风格中的任意一种;
通过待训练的关键点迁移网络提取所述原始样本图像包含的脸部的原始关键点信息,以及提取所述第一风格引导图像包含的脸部的第一风格关键点信息;
通过所述关键点迁移网络基于所述第一风格关键点信息对所述原始关键点信息包括的原始关键点进行迁移,得到样本迁移关键点信息,并根据所述样本迁移关键点信息计算第一迁移损失;
根据所述第一迁移损失调整所述关键点迁移网络的参数。
6.根据权利要求5所述的方法,其特征在于,所述原始样本图像和所述第一风格引导图像包含的脸部不相同。
7.根据权利要求5所述的方法,其特征在于,所述通过待训练的关键点迁移网络基于所述第一风格关键点信息对所述原始关键点信息包括的原始关键点位置进行迁移,得到样本迁移关键点信息,包括:
通过所述关键点迁移网络从所述原始关键点信息中提取出原始脸部特征;
通过所述关键点迁移网络从所述第一风格关键点信息中提取出用于表征所述第一风格的第一风格特征;
通过所述关键点迁移网络融合所述原始脸部特征和所述第一风格特征,并对融合得到的第一融合特征进行还原,得到样本迁移关键点信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110886585.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种煤矸石分选装置
- 下一篇:冷热源热泵集成系统及用于其控制的方法及装置
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序