[发明专利]基于学习排序的人脸图像质量评价的方法和系统在审
申请号: | 202211540806.0 | 申请日: | 2022-12-02 |
公开(公告)号: | CN115731599A | 公开(公告)日: | 2023-03-03 |
发明(设计)人: | 杨华;陈泽浩 | 申请(专利权)人: | 上海交通大学 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/774 |
代理公司: | 上海恒慧知识产权代理事务所(特殊普通合伙) 31317 | 代理人: | 徐红银;张琳 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 学习 排序 图像 质量 评价 方法 系统 | ||
1.一种基于学习排序的人脸图像质量评价的方法,其特征在于,包括:
利用人脸识别模型提取人脸图像在潜在空间内的人脸特征,基于所述人脸特征构造人脸数据集中每个身份对应的的类中心;
基于所述类中心,构造人脸图像样本在潜在空间内的标准化类内距离;
基于所述类中心,构造人脸图像样本在潜在空间内的标准化类间距离;
利用人脸图像样本的所述标准化类内距离和所述标准化类间距离,构造人脸图像样本的质量标签;
构造人脸图像质量网络用于预测人脸图像的质量;
构造人脸图像对根据它们的质量标签,构造质量高于的实际概率作为训练标签;根据所述质量网络对它们质量的预测,构造质量高于的后验概率;
根据所述人脸图像对的所述实际概率和所述后验概率,构造交叉熵损失函数;
基于所述交叉熵损失函数训练所述人脸图像质量网络,利用训练后的人脸图像质量网络完成人脸图像质量评价。
2.根据权利要求1所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,所述利用人脸识别模型提取人脸图像在潜在空间内的人脸特征,基于所述人脸特征构造人脸数据集中每个身份对应的的类中心,包括:
给定一个含有m个身份的人脸图像数据集其中表示第j个身份的第i张人脸图像,nj表示第j个身份的图像总数;
对于使用预训练的人脸识别模型提取对应的人脸特征向量:
对于任意身份j,利用该身份所有人脸图像的特征构造所述类中心:
3.根据权利要求1所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,所述基于所述类中心,构造人脸图像样本在潜在空间内的标准化类内距离,包括:
对于任意人脸图像计算其到对应类中心的类内角度距离:
利用同一身份中所有人脸图像的类内角度距离,计算该身份类内距离的平均值:以及标准差:
利用所述类内角度距离,同身份类内距离平均值和标准差,构造所述人脸图像样本在潜在空间内的标准化类内距离:
所述基于所述类中心,构造人脸图像样本在潜在空间内的标准化类间距离,包括:
对于任意人脸图像计算其到其他身份类别k中心的角度距离:
选择所有到其他类的角度距离中最小的作为的类间距离:
计算角度距离最小的身份类内距离的平均值以及标准差
根据最小类的类内距离平均值和标准差,构造所述人脸图像样本在潜在空间内的标准化类间距离:
4.根据权利要求1所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,利用所述人脸图像样本的标准化类内距离和标准化类间距离,构造所述人脸图像样本的质量标签:
其中,β为常数。
5.根据权利要求1所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,所述人脸图像质量网络是基于视觉Transformer的神经网络,输入为一张人脸图像,输出为人脸图像的质量分数。
6.根据权利要求5所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,所述人脸图像对其质量标签为所述质量高于的实际概率作为训练标签:
利用所述人脸图像质量网络分别预测人脸图像和的质量分数:构造所述质量高于的后验概率:
7.根据权利要求6所述的一种基于学习排序的人脸图像质量评价的方法,其特征在于,根据所述人脸图像对的所述实际概率和所述后验概率P12,构造交叉熵损失函数:
将所述人脸图像质量网络和人脸图像对代入,构造所述交叉熵损失函数:
所述人脸图像质量网络采用所述损失函数,将人脸图像对和训练标签作为输入,进行迭代优化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211540806.0/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序