[发明专利]侧脸矫正的方法、矫正装置及计算机可读存储介质在审
申请号: | 202211091716.8 | 申请日: | 2022-09-07 |
公开(公告)号: | CN115578762A | 公开(公告)日: | 2023-01-06 |
发明(设计)人: | 许愿权;朱树磊;王宁波;李亚鹏;郭思郁;殷俊 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/44;G06V10/80;G06T15/00;G06T17/00;G06T7/50;G06T3/00;G06N3/04;G06N3/08 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 严翠霞 |
地址: | 310051 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 矫正 方法 装置 计算机 可读 存储 介质 | ||
1.一种侧脸矫正的方法,其特征在于,所述方法包括:
获取目标图像,所述目标图像包括目标人脸;
从所述目标图像中提取特征,得到所述目标人脸的正脸特征和所述目标人脸所处背景的背景特征;
将所述正脸特征和所述背景特征进行融合处理,得到融合特征;
根据所述融合特征,生成矫正图像,其中,所述矫正图像中的人脸为与所述目标人脸对应的正脸。
2.根据权利要求1所述的方法,其特征在于,所述从所述目标图像中提取特征,得到所述目标人脸的正脸特征和所述目标人脸所处背景的背景特征的步骤,包括:
从所述目标图像中分离出所述目标人脸的人脸图像和所述目标人脸所处背景的背景图像;
对所述人脸图像进行正脸特征提取,得到所述正脸特征,以及对所述背景图像进行特征提取,得到所述背景特征。
3.根据权利要求2所述的方法,其特征在于,所述从所述目标图像中分离出所述目标人脸的人脸图像和所述目标人脸所处背景的背景图像的步骤,包括:
根据所述目标图像,生成所述目标人脸的三维人脸模型;
根据所述三维人脸模型,生成所述目标人脸在所述目标图像上的人脸掩膜;
根据所述人脸掩膜,从所述目标图像中分离出所述人脸图像和所述背景图像。
4.根据权利要求1所述的方法,其特征在于,所述从所述目标图像中提取特征,得到所述目标人脸的正脸特征和所述目标人脸所处背景的背景特征的步骤,包括:
利用预先训练好的侧脸矫正模型中的编码器从所述目标图像提取特征,得到所述正脸特征和所述背景特征;
所述根据融合特征,生成矫正图像的步骤,包括:
将所述融合特征输入所述侧脸矫正模型中的生成器,生成所述矫正图像。
5.根据权利要求4所述的方法,其特征在于,在所述获取目标图像之前,还包括:
获取多个第一样本图像,每个所述第一样本图像均包括第一样本人脸;
利用所述编码器分别从每个所述第一样本图像中提取特征,得到每个所述第一样本图像中所述第一样本人脸的第一样本正脸特征和所述第一样本人脸所处背景的第一样本背景特征;
利用所述编码器从每个所述第一样本图像各自对应的第二样本图像中提取特征,得到每个所述第二样本图像中第二样本人脸的第二样本正脸特征,其中,所述第一样本图像中的所述第一样本人脸和所述第一样本图像对应的所述第二样本图像中的所述第二样本人脸对应同一个样本对象,所述第一样本图像中的背景和所述第一样本图像对应的第二样本图像中的背景对应同一背景,且每个所述第二样本图像中的所述第二样本人脸为正脸;
分别将每个所述第一样本图像对应的所述第一样本正脸特征和所述第一样本背景特征进行融合处理,得到每个所述第一样本图像对应的样本融合特征;
分别将每个所述样本融合特征输入所述生成器,得到每个所述第一样本图像对应的样本矫正图像;
根据多个所述第一样本正脸特征和所述第一样本正脸特征各自对应的所述第二样本正脸特征,确定第一损失值;
根据多个所述样本矫正图像和所述样本矫正图像对应的所述第二样本图像,确定第二损失值;
根据所述第一损失值和所述第二损失值,确定总损失值;
根据所述总损失值对所述侧脸矫正模型进行训练。
6.根据权利要求5所述的方法,其特征在于,所述根据多个所述样本矫正图像和所述样本矫正图像对应的所述第二样本图像,确定第二损失值的步骤,包括:
根据多个所述样本矫正图像的像素值和每个所述样本矫正图像对应的所述第二样本图像的像素值,确定第一子损失值;
根据多个所述样本矫正图像的人脸特征和每个所述样本矫正图像对应的所述第二样本图像的人脸特征,确定第二子损失值;
根据多个所述样本矫正图像中人脸上的至少一个目标部位的第一部位特征和每个所述样本矫正图像对应的所述第二样本图像中人脸上的至少一个所述目标部位的第二部位特征,确定第三子损失值;
根据所述第一子损失值、第二子损失值以及所述第三子损失值中的至少一个,确定所述第二损失值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211091716.8/1.html,转载请声明来源钻瓜专利网。