[发明专利]一种基于深度学习的文字检测方法及装置有效
| 申请号: | 201510522970.2 | 申请日: | 2015-08-24 |
| 公开(公告)号: | CN105184312B | 公开(公告)日: | 2018-09-25 |
| 发明(设计)人: | 王亮;王威;张宇琪;范伟 | 申请(专利权)人: | 中国科学院自动化研究所;富士通株式会社 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/08 |
| 代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 宋焰琴 |
| 地址: | 100190 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 深度 学习 文字 检测 方法 装置 | ||
1.一种基于深度学习的文字检测方法,包括步骤:
步骤S1,构建多层卷积神经网络;所述多层卷积神经网络包括多个卷积层和全连接层;其输入为图像,输出为字符分类结果;
步骤S2,采用误差反向传播算法训练所述多层卷积神经网络,从而得到字符识别模型,其中训练过程中使用的目标函数为输入图像的真实字符类别与所述字符识别模型预测结果的交叉熵;
步骤S3,将步骤S1中建立的多层卷积神经网络的输出层节点修改为2,并利用训练好的所述字符识别模型的权重初始化修改后的多层卷积神经网络的权重;
步骤S4,利用字符-非字符数据集对修改后的多层卷积神经网络进行训练,得到字符-非字符二分类模型;
步骤S5,将所述字符-非字符二分类模型中的所有全连接层修改成卷积层;
步骤S6,利用步骤S5中修改后的所述字符-非字符二分类模型对测试图像采用多尺度扫描窗口进行测试,得到文字区域的概率图,并对所述概率图进行非极大值抑制得到最终的文字区域。
2.根据权利要求1所述的方法,其中,步骤S2中,所述字符识别模型的激活函数如下表示:
f(x)=max(0,WTx+b)
其中,W是模型权重,b是偏置项,x是上一层的输出。
3.如权利要求2所述的方法,其中,所述权重如下更新:
其中,η为学习率,Wi为第i层的权重值,E为所述字符识别模型的目标函数。
4.如权利要求1-3任一项所述的方法,其中,所述字符识别模型的目标函数如下表示:
其中,E为所述字符识别模型的目标函数,pl为所述字符识别模型输出的输入图像属于第l类的概率,ql为所述输入图像属于第l类的真实概率。
5.如权利要求1-3任一项所述的方法,其中,步骤S2中采用随机梯度下降算法使目标函数小于预定阈值。
6.如权利要求1-3任一项所述的方法,其中,步骤S6中,所述对所述概率图进行非极大值抑制得到最终的文字区域具体包括:
对所述文字区域按照其概率图中的概率大小排序,如果概率大的区域与概率小的区域重叠超过0.5,则留下概率大的区域,去除概率小的区域,得到最终的文字区域。
7.一种基于深度学习的文字检测装置,包括:
构建模块,构建多层卷积神经网络;所述多层卷积神经网络包括多个卷积层和全连接层;其输入为图像,输出为字符分类结果;
字符识别模型训练模块,采用误差反向传播算法训练所述多层卷积神经网络,从而得到字符识别模型,其中训练过程中使用的目标函数为输入图像的真实字符类别与所述字符识别模型预测结果的交叉熵;
第一模型修改模块,将所述构建模块建立的多层卷积神经网络的输出层节点修改为2,并利用训练好的所述字符识别模型的权重初始化修改后的多层卷积神经网络的权重;
字符-非字符训练模块,利用字符-非字符数据集对修改后的多层卷积神经网络进行训练,得到字符-非字符二分类模型;
第二模型修改模块,将所述字符-非字符二分类模型中的所有全连接层修改成卷积层;
检测模块,第二模型修改模块修改后的所述字符-非字符二分类模型对测试图像采用多尺度扫描窗口进行测试,得到文字区域的概率图,并对所述概率图进行非极大值抑制得到最终的文字区域。
8.根据权利要求7所述的装置,其中,所述字符识别模型的激活函数如下表示:
f(x)=max(0,WTx+b)
其中,W是模型权重,b是偏置项,x是上一层的输出;
其中,所述权重如下更新:
其中,η为学习率,Wi为第i层的权重值,E为所述字符识别模型的目标函数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所;富士通株式会社,未经中国科学院自动化研究所;富士通株式会社许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510522970.2/1.html,转载请声明来源钻瓜专利网。





