[发明专利]车牌号码识别方法及装置

说明书

本申请揭示了一种车牌号码识别方法及装置，该方法包括利用训练好的车牌检测器对执法仪视频中的图像进行车牌域识别，再利用拉东变换对车牌域进行粗矫正；将粗矫正后的车牌域输入至车牌关键点特征模型进行车牌关键点特征定位，得到精准定位的车牌；依次仿射变换和投影精准矫正方式对车牌进行二次精确矫正；利用端到端的车牌字符识别模型及车牌类型匹配模板，对矫正后的车牌进行车牌号码修正识别。本申请通过拉东变换、仿射变换和投影精准矫正方式分别对车牌进行矫正，弥补单次矫正的不足，提高矫正效率；通过端到端的车牌字符识别模型和车牌类型匹配模板的匹配机制，规避了字符误生成或漏生成问题，并降低了车牌多次循环匹配的复杂度。

技术领域

本发明属于车牌号码识别技术领域，涉及一种车牌号码识别方法及装置。

背景技术

智能车牌识别方法是一种基于视频图像中的车牌特征进行车牌号码识别的技术。这种技术被广泛地运用在交通车辆违章监管、交通事故取证复核等领域。常规卡口的车辆车牌识别技术路线可以总结为：对输入处理的一张图像或一段视频，首先采用车辆检测器对视频图像中的车辆进行一级检测，再将车辆区域进行车二级车牌区域检测，然后将车牌待检区域输入到车牌关键点特征模型中提取车牌区域图像的关键点特征，再通过仿射变换、水平投影等对车牌关键点矫正，最后将矫正后的车牌通过字符检测及号码识别技术，实现常规卡口抓拍车辆的车牌号码准确识别。

然而移动佩戴式执法仪办案环境复杂多变，视频拍摄易受光照，抖动，佩戴高低及角度等因素干扰，导致视频图像中的车辆特征缺失严重，车牌偏斜角度及形变较大，加大了执法仪视频图像车牌识别的难度。车牌号码的准确识别对交通违章及事故核实取证等至关重要，而依靠传统方法的车牌特征提取，常规卡口车辆一级至车牌域二级检测模式及单次倾斜车牌角度矫正方法已无法有效解决执法仪车牌识别所遇到的问题，因此急需一种针对执法仪的智能车牌识别技术方案。

发明内容

本申请提供了一种车牌号码识别方法及装置，技术方案如下：

第一方面，提供了一种车牌号码识别方法，所述方法包括：

利用训练好的车牌检测器对执法仪视频中的图像进行车牌域识别，利用拉东变换对车牌域进行粗矫正；

将粗矫正后的车牌域输入至车牌关键点特征模型进行车牌关键点特征标注，得到包含标注有车牌关键点特征的车牌；

依次利用仿射变换和投影精准矫正方式分别对所述车牌进行二次精确矫正；

利用训练好的端到端的车牌字符识别模型及与车牌类型匹配模板，对所述二次精确矫正后的车牌进行车牌号码修正识别，所述端到端的车牌字符识别模型标签对应于车牌号码的字符类别数。

可选地，在所述输入至车牌关键点特征模型进行车牌关键点特征标注之前，所述方法还包括：

对标注的所述车牌关键点的坐标进行随机外扩，得到具备所述外扩后的车牌关键点坐标的车牌域。

可选地，在所述利用训练好的端到端的车牌字符识别模型及与车牌类型匹配模板，对所述二次精确矫正后的车牌进行车牌号码修正识别之前，所述方法还包括：

获取各类标签的字符识别框的样本集，每个字符识别框中的字符均进行过字符预标注，所述样本集中包含困难样本；

利用所述样本集训练所述端到端的车牌字符识别模型，所述车牌字符识别模型的卷积神经网络中添加有CBAM特征注意力模块，所述困难样本用于对所述注意力模块进行在线调整；

在所述车牌字符识别模型的字符正确识别率达到预定识别率时，停止训练。

可选地，所述获取各类标签的字符识别框的样本集，包括：

识别样本车牌图像中车牌的车牌类型，获取与所述车牌类型对应的车牌模板；