[发明专利]一种基于Transformer的人脸美丽预测方法、装置及存储介质在审
申请号: | 202111003834.4 | 申请日: | 2021-08-30 |
公开(公告)号: | CN113780124A | 公开(公告)日: | 2021-12-10 |
发明(设计)人: | 甘俊英;邹琪;郑泽鑫;何国辉;翟懿奎 | 申请(专利权)人: | 五邑大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 麦铭锋 |
地址: | 529000 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 transformer 美丽 预测 方法 装置 存储 介质 | ||
1.一种基于Transformer的人脸美丽预测方法,其特征在于,所述方法包括:
采集人脸美丽数据库的美丽人脸图像,以及对所述美丽人脸图像进行预处理,得到图像块信息;
将所述美丽人脸图像输入到预设的知识蒸馏网络中,得到蒸馏标记信息;
将所述图像块信息、所述蒸馏标记信息和预设类别标记输入到预设的Transformer网络中,得到人脸美丽分类信息。
2.根据权利要求1所述的基于Transformer的人脸美丽预测方法,其特征在于,所述对所述美丽人脸图像进行预处理,得到图像块信息,包括:
对所述美丽人脸图像进行数据增强处理,得到人脸图像增强信息;
对所述人脸图像增强信息进行裁剪处理,得到所述图像块信息。
3.根据权利要求1所述的基于Transformer的人脸美丽预测方法,其特征在于,所述知识蒸馏网络包括教师网络,所述将所述美丽人脸图像输入到预设的知识蒸馏网络中,得到蒸馏标记信息,包括:
将所述美丽人脸图像输入到预设的所述知识蒸馏网络中,得到从所述教师网络中输出的所述蒸馏标记信息。
4.根据权利要求1所述的基于Transformer的人脸美丽预测方法,其特征在于,所述Transformer网络包括自注意力层和多层感知机,所述将所述图像块信息、所述蒸馏标记信息和预设类别标记输入到预设的Transformer网络中,得到人脸美丽分类信息,包括:
将所述图像块信息、所述蒸馏标记信息和所述预设类别标记分别与所述自注意力层进行交互处理,得到人脸分类信息;
将所述人脸分类信息输入到所述多层感知机,以及根据所述多层感知机的损失函数,得到所述人脸美丽分类信息。
5.根据权利要求2所述的基于Transformer的人脸美丽预测方法,其特征在于,所述数据增强处理包括自增强、随机增强和随机擦除。
6.一种基于Transformer的人脸美丽预测装置,其特征在于,包括:
第一单元,用于采集人脸美丽数据库的美丽人脸图像,以及对所述美丽人脸图像进行预处理,得到图像块信息;
第二单元,用于将所述美丽人脸图像输入到预设的知识蒸馏网络中,得到蒸馏标记信息;
第三单元,用于将所述图像块信息、所述蒸馏标记信息和预设类别标记输入到预设的Transformer网络中,得到人脸美丽分类信息。
7.根据权利要求6所述的基于Transformer的人脸美丽预测装置,其特征在于,所述第一单元包括:
第四单元,用于对所述美丽人脸图像进行数据增强处理,得到人脸图像增强信息;
第五单元,用于对所述人脸图像增强信息进行裁剪处理,得到所述图像块信息。
8.根据权利要求6所述的基于Transformer的人脸美丽预测装置,其特征在于,所述第三单元包括:
第六单元,用于将所述图像块信息、所述蒸馏标记信息和所述预设类别标记分别与所述自注意力层进行交互处理,得到人脸分类信息;
第七单元,用于将所述人脸分类信息输入到所述多层感知机,以及根据所述多层感知机的损失函数,得到所述人脸美丽分类信息。
9.根据权利要求7所述的基于Transformer的人脸美丽预测装置,其特征在于,所述数据增强处理包括自增强、随机增强和随机擦除。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,其特征在于,所述计算机可执行指令被控制处理器执行时实现如权利要求1至5任一所述的基于Transformer的人脸美丽预测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于五邑大学,未经五邑大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111003834.4/1.html,转载请声明来源钻瓜专利网。
- 基于Transformer+LSTM神经网络模型的商品销量预测方法及装置
- 一种基于Transformer模型自然场景文字识别方法
- 一种深度Transformer级联神经网络模型压缩算法
- 点云分割方法、系统、介质、计算机设备、终端及应用
- 基于Transformer的中文智能对话方法
- 一种基于改进Transformer模型的飞行器故障诊断方法和系统
- 一种基于Transformer模型的机器翻译模型优化方法
- 基于Transformer和增强交互型MPNN神经网络的小分子表示学习方法
- 基于U-Transformer多层次特征重构的异常检测方法及系统
- 基于EfficientDet和Transformer的航空图像中的飞机检测方法