[发明专利]一种用于车牌检测识别的方法及手持终端

说明书

本发明属于文字识别技术领域，特别涉及车辆识别技术领域，尤其涉及一种用于车牌检测识别的方法及手持终端，车牌检测识别的方法包括车牌检测、车牌矫正和车牌识别三个步骤，首先扩展CenterNet两个角点为车牌的四个角点，通过角点关键点检测得到车牌四个角点的位置信息，完成车牌检测步骤；再根据车牌角点倾斜角度，平面内旋转得到粗略矫正车牌，然后经过STN网络矫正得到矫正车牌，完成两次车牌矫正步骤；最后进行LPRNet识别得到车牌字符识别结果，完成车牌识别步骤。通过两次矫正得到对齐车牌，能够提高车牌识别率，并且在车牌识别训练阶段通过数据增强解决车牌模糊、车牌光线和外界天气造成的影响，轻量级模型即能实现实时识别，能广泛应用于手持终端。

技术领域

本发明属于文字识别技术领域，特别涉及车辆识别技术领域，尤其涉及一种用于车牌检测识别的方法及手持终端。

背景技术

汽车牌照号码是车辆的唯一身份标识，牌照自动识别技术可以在汽车不作任何改动的情况下实现汽车身份的自动登记及验证，这项技术已经应用于公路收费、停车管理、称重系统、交通诱导、交通执法、公路稽查、车辆调度、车辆检测等各种场合。其中车牌识别系统是计算机视频图像识别技术在车辆牌照识别中的一种应用，它以数字图像处理、模式识别、计算机视觉等技术为基础，对摄像机所拍摄的车辆图像或者视频序列进行分析，得到每一辆汽车唯一的车牌号码，从而完成识别过程。

但是自然环境中车牌识别面临各种各样复杂环境影响，导致识别难度加大，例如现有的车牌识别系统，在大角度拍摄条件下车牌文字倾斜变形，不规则文字易造成错误识别；针对复杂环境下图像模糊、光照条件差和天气条件影响等，也造成识别率大大下降。另外，随着手持终端设备的普及，也需求轻量级模型对车牌进行实时识别。

发明内容

为克服背景技术中复杂环境下车牌难以识别的问题，本发明提出一种集车牌检测和车牌识别的方法及手持终端，是通过如下技术方案实现的：

一种车牌检测识别的方法，包括以下步骤：

S1、基于CenterNet检测获取车牌的角点位置信息；

S2、由S1获取的车牌角点位置信息计算车牌的倾斜角度，进行角点矫正，并通过旋转获取一次矫正后的车牌图像；

S3、所述一次矫正后的车牌图像经空间变换网络STN进行仿射变换，获取二次矫正后的车牌图像；

S4、所述二次矫正后的车牌图像由LPRNet进行识别获取车牌字符。

作为本发明一种车牌检测识别的方法的进一步改进，所述S1，CenterNet通过检测中心点、左上角点、右下角点、右上角点、左下角点五个关键点确定车牌检测目标，获取车牌四个角点的位置信息。

作为本发明一种车牌检测识别的方法的进一步改进，所述S2，根据车牌四个角点倾斜角度，平面内旋转获取一次矫正后的车牌图像。

作为本发明一种车牌检测识别的方法的进一步改进，所述S3，空间变换网络STN通过包括平移、旋转、缩放在内的一种或多种形式的仿射变换，获取二次矫正后的车牌图像。

作为本发明一种车牌检测识别的方法的进一步改进，所述S4，LPRNet的模型为1.86M。

一种手持终端，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的车牌检测识别方法。