[发明专利]一种人脸关键点检测模型训练方法、装置和设备在审
申请号: | 202110579215.3 | 申请日: | 2021-05-26 |
公开(公告)号: | CN113313010A | 公开(公告)日: | 2021-08-27 |
发明(设计)人: | 刘畅;刘思伟 | 申请(专利权)人: | 广州织点智能科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 刘晓娟 |
地址: | 510627 广东省广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 关键 检测 模型 训练 方法 装置 设备 | ||
1.一种人脸关键点检测模型训练方法,其特征在于,包括:
获取通过第一人脸训练样本训练好的P-Net网络的第一输出结果,并基于所述第一输出结果和原始人脸训练样本获取第二人脸训练样本,所述第二人脸训练样本标注有人脸角度信息,所述第一人脸训练样本通过对所述原始人脸训练样本裁剪得到;
通过所述第二人脸训练样本训练R-Net网络,并获取训练过程中的所述R-Net网络的第一损失值;
根据所述第二人脸训练样本的人脸角度信息调整所述第一损失值,并通过调整后的所述第一损失值更新所述R-Net网络的网络参数,得到训练好的所述R-Net网络;
将所述第二人脸训练样本输入到训练好的所述R-Net网络,得到第二输出结果,根据所述第二输出结果和所述原始人脸训练样本获取第三人脸训练样本,所述第三人脸训练样本标注有人脸角度信息;
通过所述第三人脸训练样本训练O-Net网络,并获取训练过程中的所述O-Net网络的第二损失值;
根据所述第三人脸训练样本的人脸角度信息调整所述第二损失值,并通过调整后的所述第二损失值更新所述O-Net网络的网络参数,得到训练好的所述O-Net网络;
结合训练好的所述P-Net网络、训练好的所述R-Net网络和训练好的所述O-Net网络,得到人脸关键点检测模型,所述人脸关键点检测模型用于人脸检测、人脸框检测和人脸关键点检测。
2.根据权利要求1所述的人脸关键点检测模型训练方法,其特征在于,所述获取通过第一人脸训练样本训练好的P-Net网络的第一输出结果,并基于所述第一输出结果和原始人脸训练样本获取第二人脸训练样本,所述第二人脸训练样本标注有人脸角度信息,所述第一人脸训练样本通过对所述原始人脸训练样本裁剪得到,包括:
将第一人脸训练样本输入到训练好的P-Net网络进行人脸框预测,获取训练好的所述P-Net网络输出的所述第一人脸训练样本的人脸框预测结果,所述第一人脸训练样本通过对原始人脸训练样本裁剪得到;
根据所述第一人脸训练样本的人脸框预测结果对所述原始人脸训练样本进行裁剪,得到第二人脸训练样本,并根据所述第二人脸训练样本的人脸关键点坐标获取所述第二人脸训练样本的人脸角度信息。
3.根据权利要求1所述的人脸关键点检测模型训练方法,其特征在于,所述将所述第二人脸训练样本输入到训练好的所述R-Net网络,得到第二输出结果,根据所述第二输出结果和所述原始人脸训练样本获取第三人脸训练样本,所述第三人脸训练样本标注有人脸角度信息,包括:
将第二人脸训练样本输入到训练好的所述R-Net网络进行人脸框预测,获取训练好的所述R-Net网络输出的所述第二人脸训练样本的人脸框预测结果;
根据所述第二人脸训练样本的人脸框预测结果对所述原始人脸训练样本进行裁剪,得到第三人脸训练样本,并根据所述第三人脸训练样本的人脸关键点坐标获取所述第三人脸训练样本的人脸角度信息。
4.根据权利要求1-3任一项所述的人脸关键点检测模型训练方法,其特征在于,所述方法还包括:
根据所述第二人脸训练样本或所述第三人脸训练样本的人脸角度信息,将人脸角度超过预置角度范围的所述第二人脸训练样本或所述第三人脸训练样本作为非目标训练样本,将人脸角度在所述预置角度范围内的所述第二人脸训练样本或所述第三人脸训练样本作为目标训练样本;
对所述非目标训练样本进行数据增强,得到增强训练样本;
融合所述增强训练样本和所述目标训练样本,得到预处理后的所述第二人脸训练样本或预处理后的所述第三人脸训练样本。
5.根据权利要求1所述的人脸关键点检测模型训练方法,其特征在于,调整后的所述第一损失值或调整后的所述第二损失值为:
式中,L为调整前的第一损失值或第二损失值,为调整后的第一损失值或第二损失值,C=1、2、3,θ1、θ2、θ3分别为人脸角度信息中的pitch角、yaw角、roll角。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州织点智能科技有限公司,未经广州织点智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110579215.3/1.html,转载请声明来源钻瓜专利网。