[发明专利]人脸表情的迁移方法和人脸表情的迁移装置有效
申请号: | 201810901216.3 | 申请日: | 2018-08-09 |
公开(公告)号: | CN109087379B | 公开(公告)日: | 2020-01-17 |
发明(设计)人: | 王行;盛赞;周晓军;李骊;杨淼;李朔 | 申请(专利权)人: | 北京华捷艾米科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06K9/00 |
代理公司: | 32200 南京经纬专利商标代理有限公司 | 代理人: | 楼高潮 |
地址: | 100193 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 预设 关键点 人脸 表情 彩色图像 人脸表情 迁移 变形模型 投影结果 投影矩阵 拟合 方程组 方法和装置 二维空间 构造线性 卡通模型 迁移装置 权重系数 人脸检测 位置计算 投影 驱动 | ||
1.一种人脸表情的迁移方法,其特征在于,包括:
步骤S110、获取当前帧彩色图像;
步骤S120、对所述当前帧彩色图像进行人脸检测,并在检测到存在人脸时执行步骤S130,反之,执行步骤S110;
步骤S130、计算所述当前帧彩色图像的人脸若干个预设的关键点的位置;
步骤S140、根据所述当前帧彩色图像的人脸若干个预设的关键点的位置以及预设的变形模型的若干个预设的关键点的位置计算投影矩阵,并利用所述投影矩阵,将所述变形模型的所述若干个预设的关键点的位置所对应的中性表情和表情基投影到二维空间,以获得投影结果;
步骤S150、根据所述投影结果以及所述当前帧彩色图像的人脸若干个预设的关键点的位置,构造线性方程组,并计算得到表情基的权重系数,以拟合得到人脸的实时表情;
步骤S160、根据拟合得到的人脸的实时表情驱动卡通模型,以完成人脸表情的迁移;
在步骤S150中,所述线性方程组以及所述表情基的权重系数满足下述关系式:
其中,(f1,f2,…,f100)为投影后的表情基,为投影后的中性表情,v为当前帧彩色图像的表情,(w1,w2,…,w100)为权重系数向量;
在所述步骤S150中,所述拟合得到的人脸的实时表情满足下述关系式:
其中,F为所述拟合得到的人脸的实时表情,为所述变形模型中的中性表情,(s1,s2,…,s100)为所有的表情基。
2.根据权利要求1所述的迁移方法,其特征在于,预设的关键点的数量为68个,在步骤S140中,所述投影矩阵满足下述关系式:
Pη=P(η1,η2,…,η68)=(ξ1,ξ2,…,ξ68)=ξ;
其中,P为投影矩阵,η为所述变形模型的68个关键点的坐标,ξ为所述当前帧彩色图像的人脸68个关键点的坐标。
3.根据权利要求1所述的迁移方法,其特征在于,所述步骤S160具体包括:
获取影响所述卡通模型中的每个表情的主要权重
对每个表情的主要权重作归一化处理,以得到主要权重的归一化系数
将主要权重的归一化系数与每个表情的主要权重点乘求和,以得到每个表情的总权重系数
根据每个表情的总权重系数驱动所述卡通模型,以完成人脸表情的迁移。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京华捷艾米科技有限公司,未经北京华捷艾米科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810901216.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:图像处理方法及系统
- 下一篇:一种漫画动图生成方法、装置及存储介质