[发明专利]图像处理方法、装置和系统有效

专利信息
申请号: 201811085101.8 申请日: 2018-09-17
公开(公告)号: CN109325437B 公开(公告)日: 2021-06-22
发明(设计)人: 廖声洋 申请(专利权)人: 北京旷视科技有限公司
主分类号: G06K9/00 分类号: G06K9/00;G06T17/00
代理公司: 北京超凡志成知识产权代理事务所(普通合伙) 11371 代理人: 徐丽
地址: 100000 北京*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 装置 系统
【权利要求书】:

1.一种图像处理方法,其特征在于,所述方法包括:

获取目标对象的脸部图像;

从所述脸部图像中检测所述目标对象的人脸特征点;

建立设定数量的基础三维模型;其中,每个所述基础三维模型包括指定种类的基础特征点;每个所述基础三维模型的基础特征点用于表征至少一种基础形状或至少一种基础表情;所述基础形状包括基础脸部形状和基础五官形状;

对所述基础三维模型进行参数化,获得基础三维模型的基础参数;所述基础参数包括:所述基础特征点相对于预设的标准三维模型中的标准特征点的差向量;

根据所述人脸特征点和所述基础三维模型的基础参数生成所述目标对象的脸部的三维空间信息;

将预设的脸部纹理数据与所述三维空间信息相融合,得到与所述目标对象相关联的人脸三维重建模型。

2.根据权利要求1所述的方法,其特征在于,获取目标对象的脸部图像的步骤,包括:

采集预览帧图像;

对所述预览帧图像进行人脸检测;

如果检测到所述预览帧图像中存在人脸,通过深度摄像头采集所述人脸的预设角度范围内的视频帧,得到脸部图像。

3.根据权利要求1所述的方法,其特征在于,所述对所述基础三维模型进行参数化,获得基础三维模型的基础参数包括:

将所述基础特征点和预设的标准三维模型中的标准特征点进行差值运算,得到所述基础特征点对应的差向量,将所述基础特征点对应的差向量作为所述基础三维模型的基础参数;每个所述基础三维模型的基础参数包括至少一种基础形状的基础形状参数或至少一种基础表情的基础表情参数;其中,进行差值运算的基础特征点和所述标准特征点相对应;所述差向量包括位移差向量和转角差向量。

4.根据权利要求3所述的方法,其特征在于,根据所述人脸特征点和所述基础三维模型的基础参数生成所述目标对象的脸部的三维空间信息的步骤,包括:

将所述人脸特征点和所述标准三维模型中的标准特征点进行差值运算,得到所述人脸特征点对应的差向量,将所述人脸特征点对应的差向量作为所述目标对象的当前参数;其中,进行差值运算所述人脸特征点和所述标准特征点相对应;

根据每个所述基础三维模型对应的基础形状参数或基础表情参数,分解所述目标对象的当前参数,得到所述当前参数相对于各个所述基础三维模型的权重系数;

根据所述权重系数将所述基础三维模型进行加权融合,得到目标对象的脸部的三维空间信息。

5.根据权利要求1所述的方法,其特征在于,将预设的脸部纹理数据与所述三维空间信息相融合,得到与所述目标对象相关联的人脸三维重建模型的步骤,包括:

根据预设的剖分精度和剖分形状,对所述三维空间信息进行网格剖分,得到所述三维空间信息对应的三维网格剖分集合;

从预设的脸部纹理数据中提取坐标信息;

根据所述坐标信息,将所述脸部纹理数据贴图至所述三维网格剖分集合,得到与所述目标对象相关联的人脸三维重建模型。

6.根据权利要求5所述的方法,其特征在于,得到所述三维空间信息对应的三维网格剖分集合的步骤之后,所述方法还包括:

接收用户的变换指令;

根据所述变换指令对所述人脸三维重建模型对应的三维网格剖分集合进行差分矩阵变换,得到变换后的所述三维网格剖分集合。

7.根据权利要求5所述的方法,其特征在于,得到与所述目标对象相关联的人脸三维重建模型的步骤之后,所述方法还包括:

根据所述人脸三维重建模型对应的所述三维网格剖分集合中,各个网格与预设光源点的位置关系以及各个所述网格的法向量,为各个所述网格对应的局部纹理数据进行打光处理,得到光照效果下的所述人脸三维重建模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京旷视科技有限公司,未经北京旷视科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811085101.8/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top