[发明专利]基于信息熵的细分类识别模型训练、图像识别方法及装置在审
| 申请号: | 201911221074.7 | 申请日: | 2019-12-03 |
| 公开(公告)号: | CN110929802A | 公开(公告)日: | 2020-03-27 |
| 发明(设计)人: | 艾江波 | 申请(专利权)人: | 北京迈格威科技有限公司 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N20/00 |
| 代理公司: | 北京隆源天恒知识产权代理事务所(普通合伙) 11473 | 代理人: | 陈雪飞 |
| 地址: | 100190 北京市海淀区科*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 信息 细分 识别 模型 训练 图像 方法 装置 | ||
本发明提供了一种基于信息熵的细分类识别模型训练、图像识别方法及装置,涉及机器学习技术领域,包括:获取输入图像,并确定所述输入图像的特征向量;根据所述特征向量进行分类,确定所述分类后每个类别的预测值;根据所述预测值以及每个所述类别对应的标签值构建融合损失函数;根据所述融合损失函数对所述细分类识别模型进行训练,以更新所述细分类识别模型的参数。本发明使用神经网络对输入图像进行特征提取和分类。根据分类的预测值与对应标签值构建对偶交叉熵和最大熵损失函数。可在不增加模型复杂度和计算量的情况下,使得分类准确率得到大幅的提升。还可以在保证我类置信度的情况下,让模型在细粒度图像识别的鲁棒性更强。
技术领域
本发明涉及机器学习技术领域,具体而言,涉及一种基于信息熵的细分类识别模型训练、图像识别方法及装置。
背景技术
图像分类是计算机视觉研究领域的一个经典课题,主要包括粗粒度和细粒度图像分类。其中细粒度图像分类(Fine-grained Image Classification,FGIC)是对一个粗粒度大类别进行更精细的子类划分,例如区分鸟的种类、车的品牌款式以及狗的品种等。在很多情况下细粒度图像分类更具有使用价值,成为近年来计算机视觉领域的热点研究问题。
但由于这些子类别通常具有较小的类间差异,往往需要依靠微小的局部差异对类别进行区分,例如鸟类数据集中的某两种非常相似的鸟类,仅喙部形态具有较大不同。而相比类间差异,细粒度图像分类中通常存在较大的类内差异,包括物体姿态、尺度、视角、光照、遮挡以及背景干扰等。因此与普通的图像分类任务相比,细粒度图像分类的研究具有更大的挑战性。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题,为达上述目的,本发明第一方面的实施例提供了一种基于信息熵的细分类识别模型训练方法,其包括:
获取输入图像,并确定所述输入图像的特征向量;
根据所述特征向量进行分类,确定所述分类后每个类别的预测值;
根据所述预测值以及每个所述类别对应的标签值构建融合损失函数,所述融合损失函数基于信息熵进行构建;
根据所述融合损失函数对所述细分类识别模型进行训练,以更新所述细分类识别模型的参数。
进一步地,所述信息熵包括对偶交叉熵和最大熵。
进一步地,所述融合损失函数根据所述预测值以及所述每个类别对应的标签值的所述对偶交叉熵进行构建,还根据所述预测值的所述最大熵进行构建。
进一步地,根据所述对偶交叉熵构建的损失函数表示为:
LDCE=LCE+βLr
其中,M表示训练过程中一个batch中的数据数量,yi表示每个所述类别对应的标签值,T表示向量转置符号,pi表示每个所述类别对应的预测值,α、β均表示可调节的超参数。
进一步地,所述融合损失函数表示为:
其中,γ表示可调节的超参数,θ表示所述细分类识别模型的参数。
进一步地,所述根据所述融合损失函数对所述细分类识别模型进行训练,以更新所述细分类识别模型的参数具体包括:
将所述融合损失函数进行梯度回传,结合梯度反向传播更新所述细分类识别模型的所述参数,使所述细分类识别模型达到最优点,完成对所述细分类识别模型的训练。
进一步地,所述确定所述输入图像的特征具体包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京迈格威科技有限公司,未经北京迈格威科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911221074.7/2.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置





