[发明专利]一种信息识别方法、装置及终端设备

权利要求书

1.一种信息识别方法，其特征在于，应用于终端设备，所述方法包括：

获取针对快递面单的多帧面单图像；

从所述多帧面单图像中选取出目标面单图像；其中，所述目标面单图像中的条形码中心点与候选面单图像中的条形码中心点之间的位移小于预设位移阈值，且所述候选面单图像是所述目标面单图像的前一帧面单图像；

从所述目标面单图像中解析出目标面单字段；

基于所述目标面单字段确定所述目标面单图像中的面单关键信息。

2.根据权利要求1所述的方法，其特征在于，

所述从所述多帧面单图像中选取出目标面单图像，包括：

若当前帧面单图像中的条形码满足条形码校验规则，且所述当前帧面单图像的前一帧面单图像中的条形码满足所述条形码校验规则，则基于所述当前帧面单图像中的条形码的四个顶点坐标确定第一中心点坐标，基于所述前一帧面单图像中的条形码的四个顶点坐标确定第二中心点坐标；

若所述第一中心点坐标与所述第二中心点坐标之间的位移小于预设位移阈值，则将所述当前帧面单图像选取为所述目标面单图像。

3.根据权利要求1所述的方法，其特征在于，

所述从所述目标面单图像中解析出目标面单字段，包括：

对所述目标面单图像进行面单检测，得到所述快递面单对应的4个角点以及所述4个角点的顺序；基于所述4个角点从所述目标面单图像中截取出面单区域初始子图像，并基于所述4个角点的顺序对所述面单区域初始子图像进行旋转校正，得到旋转校正后的面单区域目标子图像；

从所述面单区域目标子图像中解析出目标面单字段。

4.根据权利要求3所述的方法，其特征在于，

所述从所述面单区域目标子图像中解析出目标面单字段，包括：

对所述面单区域目标子图像进行文字检测，得到面单字段对应的坐标位置，并从所述面单区域目标子图像中截取出所述坐标位置对应的文字区域；

对所述文字区域进行文字识别，得到所述目标面单字段。

5.根据权利要求1-4任一项所述的方法，其特征在于，

所述从所述目标面单图像中解析出目标面单字段之后，所述方法还包括：

检测所述目标面单字段是否存在异常；

如果否，则执行基于所述目标面单字段确定所述目标面单图像中的面单关键信息的操作；如果是，则从所述多帧面单图像中选取出新目标面单图像，返回执行从所述新目标面单图像中解析出目标面单字段的操作。

6.根据权利要求5所述的方法，其特征在于，

所述检测所述目标面单字段是否存在异常，包括：

将所述目标面单字段输入给已训练的目标网络模型，得到所述目标面单字段中每个字符对应的置信度、所述目标面单字段对应的模糊度；其中，所述目标网络模型包括目标主干子网络、目标识别子网络和目标分类子网络，所述目标主干子网络用于基于所述目标面单字段确定目标特征，所述目标识别子网络用于基于所述目标特征确定所述目标面单字段中每个字符对应的置信度，所述目标分类子网络用于基于所述目标特征确定所述目标面单字段对应的模糊度；

基于所述目标面单字段中每个字符对应的置信度和/或所述目标面单字段对应的模糊度，确定所述目标面单字段是否存在异常；其中，若有字符对应的置信度小于预设置信度阈值，则所述目标面单字段存在异常；若所述模糊度表示所述目标面单字段为模糊，则所述目标面单字段存在异常。