[发明专利]基于视频图像的轨迹生成方法、装置、电子设备和介质

说明书

本公开的实施例公开了基于视频图像的轨迹生成方法、装置、电子设备和介质。该方法的一具体实施方式包括：对预获取的视频中的每一帧图像进行物品实体检测，以生成物品检测信息，得到物品检测信息集合；基于该物品检测信息集合中的物品检测信息，生成候选轨迹集；从该候选轨迹集中筛选出满足轨迹筛选条件的候选轨迹作为预处理轨迹，得到预处理轨迹序列；对该预处理轨迹序列中的预处理轨迹进行轨迹融合处理，得到融合轨迹集；基于该融合轨迹集，生成物品拿取信息组集；将该物品拿取信息组集发送至目标终端以供显示。该实施方式提高了无人货柜的空间利用率。

技术领域

本公开的实施例涉及计算机技术领域，具体涉及基于视频图像的轨迹生成方法、装置、电子设备和介质。

背景技术

随着智能科技的快速发展，人们的购物方式发生了巨大的变化。与此同时，基于无人货柜的售货模式迅速发展起来。动态柜作为无人货柜的一种，通常是通过静态物品识别方法。即，通过识别无人售货柜开门前后，柜子内的物品变化。以此确定用户实际拿取的物品，进而生成物品的拿取信息。然而，当采用上述方法时，通常会存在以下技术问题：

第一，采用静态物品识别方法，为了保证能够精确地确定柜中物品的变化情况，往往需要无人货柜中留存有足够的空间，以保证无人货柜中的摄像机可以清楚地拍摄到无人货柜中的所有物品，此种方式使得无人货柜的空间利用率较低；

第二，由于光线等问题，导致视频的清晰度可能发生变化，进而，导致通过检测模型对视频中的图像进行检测，以生成的物品位置不够精准，从而，无法准确地确定用户所拿取的物品，使得生成的物品拿取信息往往出现错误，影响用户的购物体验，可能会降低无人货柜的用户流量。

发明内容

本公开的内容部分用于以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。

本公开的一些实施例提出了基于视频图像的轨迹生成方法、装置、电子设备和介质，来解决以上背景技术部分提到的技术问题中的一项或多项。

第一方面，本公开的一些实施例提供了一种基于视频图像的轨迹生成的方法，该方法包括：对预获取的视频中的每一帧图像进行物品实体检测，以生成物品检测信息，得到物品检测信息集合，其中，上述物品检测信息集合中的物品检测信息包括：物品类别标识、帧索引值、第一顶点坐标和第二顶点坐标；基于上述物品检测信息集合中的物品检测信息，生成候选轨迹集；从上述候选轨迹集中筛选出满足轨迹筛选条件的候选轨迹作为预处理轨迹，得到预处理轨迹序列；对上述预处理轨迹序列中的预处理轨迹进行轨迹融合处理，得到融合轨迹集；基于上述融合轨迹集，生成物品拿取信息组集；将上述物品拿取信息组集发送至目标终端以供显示。

在一些实施例中，所述对预获取的视频中的每一帧图像进行物品实体检测，以生成物品检测信息，包括：

基于所述第一候选物品检测信息包括的候选检测框第一顶点坐标、候选检测框第二顶点坐标和所述至少一个第二候选物品检测信息中各个第二候选物品检测信息包括的候选检测框第一顶点坐标、候选检测框第二顶点坐标，通过以下公式，对所述第一候选物品检测信息包括的候选检测框第一顶点坐标和候选检测框第二顶点坐标，进行校正处理，以生成已矫正第一顶点坐标和已矫正第二顶点坐标：