[发明专利]一种有效防止卷积神经网络过拟合的图像分类方法有效
申请号: | 201410333924.3 | 申请日: | 2014-07-14 |
公开(公告)号: | CN104102919B | 公开(公告)日: | 2017-05-24 |
发明(设计)人: | 王瀚漓;俞定君 | 申请(专利权)人: | 同济大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62 |
代理公司: | 上海科盛知识产权代理有限公司31225 | 代理人: | 赵继明 |
地址: | 200092 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种有效防止卷积神经网络过拟合的图像分类方法,包括获得图像训练集和图像测试集;卷积神经网络模型的训练;用训练后的卷积神经网络模型对图像测试集进行图像分类。其中,卷积神经网络模型训练的步骤为对图像训练集中的图像数据进行预处理和样本扩增,形成训练样本;对训练样本进行前向传播提取图像特征;在Softmax分类器中计算各样本的分类概率;根据概率yi计算得到训练误差;利用所述训练误差从卷积神经网络的最后一层依次往前反向传播,同时利用随机梯度下降法SGD修改网络权值矩阵W。与现有技术相比,本发明具有分类精度高、收敛速度快、计算效率高等优点。 | ||
搜索关键词: | 一种 有效 防止 卷积 神经网络 拟合 图像 分类 方法 | ||
【主权项】:
一种有效防止卷积神经网络过拟合的图像分类方法,其特征在于,该方法运行在GPU中,包括:步骤一,获得图像训练集和图像测试集;步骤二,卷积神经网络模型的训练,具体包括以下步骤:a)设定卷积神经网络的结构和训练次数上限N,初始化神经网络权值矩阵W,所述结构包括卷积神经网络的层数和每层中特征图的数量;b)从所述图像训练集中获取图像数据进行预处理,并进行样本扩增,形成训练样本;c)对所述训练样本进行前向传播提取图像特征,所述前向传播包括卷积层、非线性归一化层和混合pooling层的计算;d)在Softmax分类器中计算各样本的分类概率:yi=exp(si)Σk=1nexp(sk)]]>式中,si表示Softmax分类器第i个神经元的输出值,si=F·η,F为某个训练样本的图像特征向量,η为相应的权值,n为需要分类的类别数量;e)根据概率yi计算得到训练误差δi=Σk=1nyk*ykyk(θik-yi)]]>当i=k时,θik=1,i表示第i个类别,当原始输入属于类别i时,f)利用所述训练误差从卷积神经网络的最后一层依次往前反向传播,同时利用随机梯度下降法SGD修改网络权值矩阵W;g)判断模型训练是否完成,若是,则保存卷积神经网络模型和Softmax分类器后执行步骤三,若否,则返回步骤b);步骤三,利用训练后的卷积神经网络模型对图像测试集进行图像分类。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410333924.3/,转载请声明来源钻瓜专利网。