[发明专利]脸部变换方法、装置、设备、存储介质以及产品有效
申请号: | 202110944348.6 | 申请日: | 2021-08-17 |
公开(公告)号: | CN113658035B | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 颜剑锋 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 宋兴;黄健 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 脸部 变换 方法 装置 设备 存储 介质 以及 产品 | ||
1.一种脸部变换方法,包括:
确定源脸部图像以及目标脸部图像;
将所述目标脸部图像中的面部器官替换为所述源脸部图像中的面部器官,获得面部器官图像;
将所述源脸部图像以及所述目标脸部图像划分为至少一个图像组;其中,任一个图像组包含源脸部图像的第一区域图像以及目标脸部图像的第二区域图像;所述第一区域图像与所述第二区域图像的脸部区域位置相同;
针对任一个图像组,确定所述图像组中第一区域图像对应三角区域的第一子关键点以及所述图像组中第二区域图像对应三角区域的第二子关键点;
计算所述第一子关键点与所述第二子关键点的位置距离矩阵;
利用所述位置距离矩阵,将所述第一区域图像中多个第一像素点各自的像素位置映射为多个映射位置;
计算多个映射位置与所述第二区域图像多个第二像素点各自的像素位置之间的位置差值,获得所述图像组对应的像素点距离,以获得所述至少一个图像组分别对应的像素点距离;
将所述至少一个图像组各自的像素点距离按照各自的脸部区域位置进行距离融合,获得脸型距离信息;
根据所述脸型距离信息,对所述面部器官图像中的脸型按照所述源脸部图像的脸型进行调整处理,获得目标换脸图像。
2.根据权利要求1所述的方法,其中,所述将所述源脸部图像以及所述目标脸部图像划分为至少一个图像组,包括:
提取所述源脸部图像中脸部区域对应第一关键点以及所述目标脸部图像中脸部区域对应第二关键点;
基于所述第一关键点以及所述第二关键点分别进行三角网络生成,获得所述第一关键点对应的第一三角网络以及所述第二关键点对应的第二三角网络;
将所述源脸部图像按照所述第一三角网络划分为至少一个第一区域图像;
将所述目标脸部图像按照所述第二三角网络划分为至少一个第二区域图像;
根据所述第一三角网络以及所述第二三角网络的网格对应关系,将所述至少一个第一区域图像以及所述至少一个第二区域图像划分为所述至少一个图像组。
3.根据权利要求1或2所述的方法,还包括:
确定所述目标脸部图像中的脸部区域信息以及面部器官区域信息;
根据所述脸部区域信息以及所述面部器官区域信息,生成所述目标脸部图像的目标掩码图像;
所述根据所述脸型距离信息,对所述面部器官图像中的脸型按照所述源脸部图像的脸型进行调整处理,获得目标换脸图像,包括:
基于所述脸型距离信息以及所述目标掩码图像,对所述面部器官图像的脸型按照所述源脸部图像的脸型进行处理,获得所述目标换脸图像。
4.根据权利要求3所述的方法,其中,所述基于所述脸型距离信息以及所述目标掩码图像,对所述面部器官图像中的脸型按照所述源脸部图像的脸型进行处理,获得所述目标换脸图像,包括:
基于所述目标掩码图像对所述面部器官图像进行脸型校准计算,获得中间图像;
利用所述脸型距离信息对所述中间图像进行仿射变换计算,获得所述目标换脸图像。
5.根据权利要求1-2、4任一项所述的方法,其中,所述将所述目标脸部图像中的面部器官替换为所述源脸部图像中的面部器官,获得面部器官图像,包括:
基于预设多个特征提取器,提取所述源脸部图像的多个图像特征信息;其中,所述多个特征提取器的提取方式不同;
基于预设属性提取器,提取所述目标脸部图像的图像属性信息;
将所述多个图像特征信息和所述图像属性信息同时输入换脸模型,以将所述目标脸部图像中的面部器官替换为所述源脸部图像的面部器官,获得所述面部器官图像。
6.根据权利要求1~2、4任一项所述的方法,其中,所述确定源脸部图像以及目标脸部图像包括:
获取待替换的初始源图像以及初始目标图像;
提取所述初始源图像的脸部区域对应第一脸部图像以及所述初始目标图像的脸部区域对应第二脸部图像;
对所述第一脸部图像进行脸部姿态校正,获得所述初始源图像对应的源脸部图像;
对所述第二脸部图像进行脸部姿态校正,获得所述初始目标图像对应的目标脸部图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110944348.6/1.html,转载请声明来源钻瓜专利网。