[发明专利]智能货柜的物品核对方法及系统

说明书

本说明书提供的智能货柜的物品核对方法及系统，服务器通过对目标图像进行图像识别，确定目标图像中的物品的类别以及物品在目标图像中所在的位置；目标用户(即补货人员)通过显示装置选择要核对的目标类别；客户端确定目标类别对应的目标物品在目标图像中的位置，对每个目标物品依次进行编号，并在显示装置中显示。补货人员可以根据显示装置中显示的目标物品的编号，一目了然知道目标物品的数量和摆放位置，直观、快速地对目标物品进行核对，以确定所有的目标物品都被正确识别，大大提高补理货的速度。

技术领域

本说明书涉及无人零售领域，尤其涉及一种智能货柜的物品核对方法及系统。

背景技术

目前的智能零售无人货柜主要采用视觉识别方案，依靠摄像头获取图像，通过图像识别技术进行商品识别，判断用户购买的商品。当无人货柜中的商品出现短缺时，补货人员需要向无人货柜添加商品，以保证货源充足。在补货人员向无人货柜添加商品后，需要逐层核对无人货柜的服务器是否可以正确识别出所有商品，以便于后续售卖过程中能够通过无人货柜采集的图像正确识别用户购买的商品。当补货人员发现漏识别或者识别错误时需要找出漏识别或者识别有错误的商品，重新开门进行调整。现有技术中，通过在图像中将所有商品框出来进行商品名称的标记，来帮助补货人员核对查找出识别错误的商品。但这种方法的图像画面杂乱，商品之间的标记交错，补货人员眼花缭乱找出识别有误或者漏识别的商品较困难、耗时较长，影响补货速度。

因此，需要提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。

发明内容

本说明书提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。

第一方面，本说明书提供一种智能货柜的物品核对方法，应用于所述智能货柜的客户端，包括：获取目标图像并发送给服务器，所述目标图像中包括多个物品；接收所述服务器发送的对所述目标图像的图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；控制显示装置显示所述目标图像以及类别列表，所述类别列表包括所述多个物品对应的至少一个类别；以及基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记。

在一些实施例中，所述基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记，包括：接收所述显示装置发送的所述目标用户对目标类别的选择，所述目标类别包括所述类别列表中的一个；在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，生成目标标记图像；以及控制所述显示装置显示所述目标标记图像。

在一些实施例中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，包括：基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中对应的位置；基于所述每个目标物品在所述目标图像中对应的位置以及预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。

在一些实施例中，所述排列规则包括：基于坐标序列的排列规则。

在一些实施例中，所述在所述目标图像中对所述至少一个目标物品依次进行编号，包括：基于所述每个目标物品在所述目标图像中对应的位置以及所述排列规则，确定所述每个目标物品的编号；以及在所述目标图像中，对所述每个目标物品在其所在的位置显示对应的编号。

在一些实施例中，所述目标用户包括通过所述服务器进行身份验证的用户。

在一些实施例中，在所述获取目标图像并发送给服务器之前，还包括：获取所述智能货柜的关门信号，其中，所述智能货柜的柜门处设置有感应传感器，与所述客户端通信连接。

在一些实施例中，所述智能货柜的物品核对方法，还包括：接收所述显示装置发送的确认核对结果的指令，并发送给所述服务器。