[发明专利]图像处理方法及相关设备、迁移网络训练方法及相关设备在审

专利信息
申请号: 202110886585.1 申请日: 2021-08-03
公开(公告)号: CN113658324A 公开(公告)日: 2021-11-16
发明(设计)人: 王顺飞 申请(专利权)人: OPPO广东移动通信有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06T19/20
代理公司: 广州德科知识产权代理有限公司 44381 代理人: 蔡丽妮;万振雄
地址: 523860 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 相关 设备 迁移 网络 训练
【权利要求书】:

1.一种图像处理方法,其特征在于,所述方法包括:

分别提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像包含的脸部的目标风格关键点信息;所述目标风格图像的图像风格是所述待处理图像需要迁移的目标风格;

通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移,得到目标迁移关键点信息;所述关键点迁移网络是利用原始样本图像,以及至少两种图像风格的风格引导图像进行训练得到的;

对所述待处理图像中的脸部进行三维重建,得到待处理三维模型;

利用所述待处理关键点信息和所述目标迁移关键点信息对所述待处理三维模型进行调整,得到所述目标风格的目标三维模型。

2.根据权利要求1所述的方法,其特征在于,所述风格引导图像和所述原始样本图像包含的脸部不相同。

3.根据权利要求1所述的方法,其特征在于,所述通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移,得到目标迁移关键点信息,包括:

通过所述关键点迁移网络从所述待处理关键点信息中提取出待处理脸部特征;

通过所述关键点迁移网络从所述目标风格关键点信息中提取出目标风格特征;

通过所述关键点迁移网络将所述待处理脸部特征与所述目标风格特征进行融合,得到目标融合特征,并对所述目标融合特征进行还原,得到目标迁移关键点信息。

4.根据权利要求1所述的方法,其特征在于,在所述分别提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像中包含的脸部的目标风格关键点信息之前,所述方法还包括:

分别对待处理图像和目标风格图像进行脸部检测,从所述待处理图像中提取出第一脸部区域,以及从所述目标风格图像中提取出第二脸部区域;

以及,所述提取待处理图像包含的脸部的待处理关键点信息,以及提取目标风格图像中包含的脸部的目标风格关键点信息,包括:

分别对所述第一脸部区域和所述第二脸部区域进行脸部关键点识别,得到从所述第一脸部区域提取出的待处理关键点信息,以及从所述第二脸部区域提取出的目标风格关键点信息。

5.一种迁移网络训练方法,其特征在于,所述方法包括:

从样本数据中选取原始样本图像和第一风格引导图像;所述样本数据包括所述原始样本图像,以及至少两种不同图像风格的风格引导图像,第一风格引导图像为具备第一风格的图像,所述第一风格为所述至少两种不同图像风格中的任意一种;

通过待训练的关键点迁移网络提取所述原始样本图像包含的脸部的原始关键点信息,以及提取所述第一风格引导图像包含的脸部的第一风格关键点信息;

通过所述关键点迁移网络基于所述第一风格关键点信息对所述原始关键点信息包括的原始关键点进行迁移,得到样本迁移关键点信息,并根据所述样本迁移关键点信息计算第一迁移损失;

根据所述第一迁移损失调整所述关键点迁移网络的参数。

6.根据权利要求5所述的方法,其特征在于,所述原始样本图像和所述第一风格引导图像包含的脸部不相同。

7.根据权利要求5所述的方法,其特征在于,所述通过待训练的关键点迁移网络基于所述第一风格关键点信息对所述原始关键点信息包括的原始关键点位置进行迁移,得到样本迁移关键点信息,包括:

通过所述关键点迁移网络从所述原始关键点信息中提取出原始脸部特征;

通过所述关键点迁移网络从所述第一风格关键点信息中提取出用于表征所述第一风格的第一风格特征;

通过所述关键点迁移网络融合所述原始脸部特征和所述第一风格特征,并对融合得到的第一融合特征进行还原,得到样本迁移关键点信息。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110886585.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top