[发明专利]一种基于Mixup的长尾数据增强处理方法在审
申请号: | 202211628965.6 | 申请日: | 2022-12-19 |
公开(公告)号: | CN115861970A | 公开(公告)日: | 2023-03-28 |
发明(设计)人: | 叶海波;周芳宇 | 申请(专利权)人: | 南京航空航天大学 |
主分类号: | G06V20/58 | 分类号: | G06V20/58;G06V10/82;G06N3/08;G06N3/0464 |
代理公司: | 南京合砺专利商标代理事务所(普通合伙) 32518 | 代理人: | 鲍小龙 |
地址: | 210016*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 mixup 长尾 数据 增强 处理 方法 | ||
1.一种基于Mixup的长尾数据增强处理方法,其特征在于:所述方法对于长尾数据训练的过程包括如下步骤:
(1)输入原始的长尾数据集S;
(2)初始化混淆概率矩阵cf为0;
(3)通过θ~Beta(α,α)得到参数,Mixup使用参数θ生成新样本数据将新样本作为模型的输入;
(4)利用θ和混淆概率矩阵cf,使用平衡的损失函数lBaMix计算模型的总损失,模型的总损失被计算为:
(5)更新模型参数,使用验证集验证模型精度;
(6)计算混淆矩阵,更新混淆概率矩阵cf;
(7)更新学习次数;
(8)如果学习次数大于指定学习次数,结束模型训练;否则重复步骤(3),继续对模型进行训练,更新模型参数。
2.根据权利要求1所述的基于Mixup的长尾数据增强处理方法,其特征在于:步骤(3)通过Mixup对长尾数据集进行数据增强,新样本数据的生成包括如下计算:
其中,(xi,yi),(xj,yj)∈S,yi是输入xi的真实标签,θ~Beta(α,α),α∈(0,+∞),(xi,yi),(xj,yj)是Mixup随机挑选的两个样本,通过参数θ将两个样本进行结合,生成新的样本
3.根据权利要求1所述的基于Mixup的长尾数据增强处理方法,其特征在于:步骤(4)对于模型总损失的计算过程如下:
假设为原始样本xi被预测为标签yi的概率,/为使用Mixup后的虚拟样本/被预测为yi的条件概率,cf(class1,class2)为类别class1被识别为class2的概率,nt为类别t的样本总数,t∈{1,…,k},k为类别数量,有:
其中存在:
式中,为输入/的第yi个输出,/为输入xi的第yi个输出,使用Mixup后,模型的输出受/影响,偏向于头部类,为了避免模型预测对头部类的偏向,引入平衡项//其中,/可能是一个接近于0的数,导致B(y,θ)趋于负无穷,为了使B(y,θ)大于0,将/放大为/并且为了使n·cf(y,y)这一分母不为0,在这一分母项上加1,则平衡项B(y,θ)最终为:
模型的总损失被计算为:
4.根据权利要求1所述的基于Mixup的长尾数据增强处理方法,其特征在于:步骤(6)通过混淆矩阵更新混淆概率矩阵cf,具体如下:
通过验证集的验证,得到当前验证集的预测标签和真实标签,通过统计预测标签和真实标签,得到混淆矩阵,而混淆概率矩阵cf只需将混淆矩阵每一行除以该行的总数,在每一轮训练结束后,都会对混淆概率矩阵进行更新。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京航空航天大学,未经南京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211628965.6/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置