[发明专利]一种自助交易方法、装置、电子设备及储存介质

说明书

本公开提供了一种自助交易方法、装置、电子设备及储存介质，其中，该方法包括：获取分别通过不同摄像装置采集的用户在自助售货装置拿取商品的视频；对各个视频中的图像进行目标检测，得到各个视频的至少一个目标商品的检测结果；基于每个视频的至少一个目标商品的检测结果，确定所述每个视频的至少一个目标商品的移动状态；基于所述每个视频的至少一个目标商品的移动状态，生成所述用户的交易信息。本公开实施例，可以提高用户交易信息生成的准确率。

技术领域

本公开涉及智能零售技术领域，具体而言，涉及一种自助交易方法、装置、电子设备及储存介质。

背景技术

随着互联网经济的发展，自助消费因其操作便利而逐渐成为被大众接受的消费趋势，因此，一些自助售卖机(如智能冰箱或者智能货架)应运而生。现有的自助售卖机，通常采用射频识别(Radio Frequency Identification，RFID)技术或者静态拍照识别技术来识别商品信息，进而根据商品的信息来生成用户交易信息。

然而，射频识别技术需要使用RFID标签，存在成本高和效率低的问题；静态拍照的识别方式仅能识别交易结果，无法反映商品的移动状态，且若相机发生污染，则会导致识别结果不准，进而导致用户交易信息出现误差，影响用户的自助购买体验。

发明内容

本公开实施例至少提供一种自助交易方法、装置、电子设备及储存介质。

第一方面，本公开实施例提供了一种自助交易方法，包括：

获取分别通过不同摄像装置采集的用户在自助售货装置拿取商品的视频；

对各个视频中的图像进行目标检测，得到各个视频的至少一个目标商品的检测结果；

基于每个视频的至少一个目标商品的检测结果，确定所述每个视频的至少一个目标商品的移动状态；

基于所述每个视频的至少一个目标商品的移动状态，生成所述用户的交易信息。

本公开实施例中，由于分别通过不同摄像装置采集的用户在自助售货装置拿取商品的视频，使得即使在其中某一个摄像装置发生污染时，仍可以通过其他摄像装置所采集的视频确定用户的交易信息，进而可以提升用户交易信息生成的准确率；此外，由于基于每个视频的至少一个目标商品的移动状态，生成用户的交易信息，使得所生成的用户交易信息能够反映出目标商品的移动轨迹，可以进一步提升用户交易信息生成的准确率。

根据第一方面，在一种可能的实施方式中，所述检测结果包括所述目标商品的检测框信息、所述目标商品的种类信息以及所述目标商品的检测结果的置信度中的至少一种。

根据第一方面，在一种可能的实施方式中，所述基于每个视频的至少一个目标商品的检测结果，确定所述每视频的至少一个目标商品的移动状态，包括：

基于所述每个视频的至少一个目标商品的检测结果，确定所述每个视频的至少一个目标商品的移动轨迹；

基于所述每个视频内的至少一个目标商品的移动轨迹，确定所述每个视频的至少一个目标商品的移动状态。

本公开实施例中，通过目标商品的检测结果确定所述目标商品的移动轨迹，然后基于移动轨迹确定该目标商品的移动状态，可以更加清楚、准确地确定目标商品的移动状态，提升了确定目标商品的移动状态的准确率。

根据第一方面，在一种可能的实施方式中，所述每个视频包括多帧图像，所述基于所述每个视频的至少一个目标商品的检测结果，确定所述每个视频的至少一个目标商品的移动轨迹，包括：

基于所述每个视频的至少一个目标商品的检测结果，确定所述多帧图像中的当前帧图像的至少一个目标商品与所述多帧图像中除所述当前帧之外的其他帧图像的至少一个目标商品之间的相似度；

基于所述相似度，确定所述每个视频的至少一个目标商品的移动轨迹。