[发明专利]三维人脸模型建立方法、装置、电子设备及存储介质在审
| 申请号: | 202111579569.4 | 申请日: | 2021-12-22 |
| 公开(公告)号: | CN114266860A | 公开(公告)日: | 2022-04-01 |
| 发明(设计)人: | 黄开竹;杨超龙;赵伟光;叶嘉楠;闫毓垚;杨曦 | 申请(专利权)人: | 西交利物浦大学 |
| 主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T19/20;G06T15/00;G06T3/40;G06N3/04;G06N3/08;G06V40/16 |
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 王风茹 |
| 地址: | 215123 江苏省苏州市*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 三维 模型 建立 方法 装置 电子设备 存储 介质 | ||
本发明实施例公开了一种三维人脸模型建立方法、装置、电子设备及存储介质。该方法包括:获取包含人脸区域的二维样本图像,确定二维样本图像的样本图像特征;基于样本图像特征,确定预先建立的三维形变模型中的模型参数值和与二维样本图像对应的样本姿态参数,基于各模型参数值生成三维人脸模型;将三维人脸模型和姿态参数输入至预先建立的可微分渲染模型中,生成与二维样本图像对应的二维渲染图像;将二维样本图像与二维渲染图像进行对比,基于对比结果调整模型参数值,将调整后的模型参数值对应的三维形变模型确定为目标三维人脸模型。本发明实施例的技术方案,可以提高模型参数值的准确性,有利于提高目标三维人脸模型的识别效果。
技术领域
本发明实施例涉及计算机视觉技术领域,尤其涉及一种三维人脸模型建立方法、装置、电子设备及存储介质。
背景技术
近年来,三维人脸广泛应用于各个领域。然而,很多现实场景仅有二维的人脸图像,因此利用二维人脸图像重建三维人脸的技术是现实场景的重要需求。
目前,三维人脸重建的方法是基于三维形变模型(3DMM)建立三维人脸数据库的基础上,利用统计的方法,将三维人脸模型用参数来表示,通过改变参数就能改变三维人脸模型,三维人脸重建的问题就转化为预测3DMM参数的问题。现有技术中,可利用卷积神经网络(CNN)提取二维人脸图像的信息来确定3DMM参数;需要预先构建包含大量的真实3D人脸图像的样本数据集,人工对3D人脸图像建立标签,基于样本数据集中的真实3D人脸图像和标签对卷积神经网络中的参数进行训练,进而确定出3DMM参数。
但是,采用现有技术需要人工构建出大量三维人脸作为训练标签,将耗费大量的人力资源和时间资源,且构建过程易出错,导致无法准确地确定出3DMM参数,影响建立的三维人脸模型的识别效果,
发明内容
本发明实施例提供了一种三维人脸模型建立方法、装置、电子设备及存储介质,以实现节省人力资源和时间资源,提高模型参数值的准确性和目标三维人脸模型的识别效果的作用。
第一方面,本发明实施例提供了一种三维人脸模型建立方法,包括:
获取包含人脸区域的二维样本图像,确定所述二维样本图像的样本图像特征;
基于所述样本图像特征,确定预先建立的三维形变模型中的模型参数值和与所述二维样本图像对应的样本姿态参数,基于各所述模型参数值生成三维人脸模型;
将所述三维人脸模型和所述姿态参数输入至预先建立的可微分渲染模型中,生成与所述二维样本图像对应的二维渲染图像;
将所述二维样本图像与所述二维渲染图像进行对比,基于对比结果调整所述模型参数值,将调整后的所述模型参数值对应的三维形变模型确定为目标三维人脸模型。
第二方面,本发明实施例还提供了一种三维人脸模型建立装置,该装置包括:
确定样本图像特征模块,用于获取包含人脸区域的二维样本图像,确定所述二维样本图像的样本图像特征;
生成三维人脸模型模块,用于基于所述样本图像特征,确定预先建立的三维形变模型中的模型参数值和与所述二维样本图像对应的样本姿态参数,基于各所述模型参数值生成三维人脸模型;
生成渲染图像模块,用于将所述三维人脸模型和所述姿态参数输入至预先建立的可微分渲染模型中,生成与所述二维样本图像对应的二维渲染图像;
调整模型参数模块,用于将所述二维样本图像与所述二维渲染图像进行对比,基于对比结果调整所述模型参数值,将调整后的所述模型参数值对应的三维形变模型确定为目标三维人脸模型。
第三方面,本发明实施例还提供了一种电子设备,该电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西交利物浦大学,未经西交利物浦大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111579569.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:全自动采棉机器人及控制方法
- 下一篇:盘纸缺陷处理装置





