[发明专利]货物的品规信息识别方法及装置

权利要求书

1.一种货物的品规信息识别方法，其特征在于，包括：

在整托货物入库或出库时，控制第一摄像机对所述整托货物的顶面进行拍摄以及控制第二摄像机对所述整托货物的侧面进行拍摄，分别得到所述整托货物的顶面图像和侧面图像，其中，所述整托货物中各个货物的包装相同，不同品规信息的货物包装不同；控制器发射超声波的方式检测整托货物是否正在入库或出库，当检测到整托货物在入库或出库，向第一摄像机和第二摄像机发送启动信号，启动第一摄像机和第二摄像机对监控区域的整托货物进行拍摄；

分别对所述顶面图像和所述侧面图像进行分割，得到各个所述货物的包装顶面图像和包装侧面图像，包括：

根据预先训练的分割网络分别处理所述顶面图像和所述侧面图像，得到各个所述货物的包装在所述顶面图像中的顶点坐标和在所述侧面图像中的顶点坐标；

根据各个所述货物的包装在所述顶面图像中的顶点坐标对所述顶面图像进行分割，得到各个所述货物的包装顶面图像；

根据各个所述货物的包装在所述侧面图像中的顶点坐标对所述侧面图像进行分割，得到各个货物的包装侧面图像；

从各个所述包装顶面图片中任选一个作为目标顶面图像，以及从各个所述包装侧面图像中任选一个作为目标侧面图像；

根据所述目标顶面图像、所述目标侧面图像和预先训练的识别模型，确定所述整托货物的品规信息，其中，所述整托货物的品规信息为：根据所述目标顶面图像、所述目标侧面图像和预先训练的识别模型，获得的所述目标顶面图像对应的品规信息和所述目标侧面图像的对应的品规信息之间相同的品规信息。

2.根据权利要求1所述的方法，其特征在于，所述根据所述目标顶面图像、所述目标侧面图像和预先训练的识别模型，确定所述整托货物的品规信息，包括：

根据所述预先训练的识别模型对所述目标顶面图像进行识别，确定所述目标顶面图像对应的品规信息；

根据所述预先训练的识别模型对所述目标侧面图像进行识别，确定所述目标侧面图像对应的品规信息；

将所述目标顶面图像对应的品规信息和所述目标侧面图像对应的品规信息进行比对，并根据比对结果确定所述整托货物的品规信息。

3.根据权利要求1所述的方法，其特征在于，还包括：

获取至少一个样本整托货物的样本数据，所述样本数据包括所述样本整托货物的样本顶面图像和样本侧面图像，所述样本整托货物包括至少一个样本货物；

标定出各个样本货物的包装分别在对应的所述样本顶面图像中的标定顶点坐标和对应的所述样本侧面图像的标定顶点坐标；

将所述样本顶面图像和对应的各个样本货物的包装在所述样本顶面图像中的标定顶点坐标作为一第一训练样本，和/或，将所述样本侧面图像和对应的各个样本货物的包装在所述样本侧面图像中的标定顶点坐标作为一第一训练样本；

利用各个第一训练样本训练初始的分割网络，得到所述预先训练的分割网络。

4.根据权利要求3所述的方法，其特征在于，还包括：

根据所述预先训练的分割网络处理所述样本顶面图像，得到各个样本货物的包装在所述样本顶面图像中的实际顶点坐标；

根据所述预先训练的分割网络处理所述样本侧面图像，得到各个样本货物的包装在所述样本侧面图像中的实际顶点坐标；

根据各个样本货物的包装在所述样本顶面图像中的实际顶点坐标对所述样本顶面图像进行分割，得到各个所述样本货物的样本包装顶面图像；

根据各个样本货物的包装在所述样本侧面图像中的实际顶点坐标对所述样本侧面图像进行分割，得到各个所述样本货物的样本包装侧面图像；

将样本包装顶面图像和样本货物对应的品规信息作为一第二训练样本，和/或，将样本包装侧面图像和样本货物对应的品规信息作为一第二训练样本；

利用各个第二训练样本训练神经网络，得到所述预先训练的识别模型。