[发明专利]信息关联方法、装置和系统

说明书

本发明提供了一种信息关联方法、装置和系统，涉及智能识别技术领域，该方法包括：获取目标区域内的多个视频帧图像；从多个视频帧图像中识别目标对象在指定位置范围内的物品处理动作轨迹；如果物品处理动作轨迹中包含指定的处理动作，获取处理动作对应物品的物品信息；将物品信息与目标对象关联。本发明可以较为全面地知晓顾客的感兴趣物品，有利于提高顾客购物行为分析的精确性；且实现成本较低。

技术领域

本发明涉及智能识别技术领域，尤其是涉及一种信息关联方法、装置和系统。

背景技术

现有的超市、便利店等无人购物场所中，通常采用RFID(Radio FrequencyIdentification，无线射频识别)技术标识不同的物品；即在每个物品或物品的外包装上粘贴射频标签，该射频标签中保存了相关的物品信息，例如物品名称、编码、价格等；顾客选购好物品后，工作人员通过扫描设备扫描物品上的射频标签获得物品信息，从而为顾客结账。

这种方式中，物品供货方通常仅能通过顾客最终购买结账的物品进行数据分析，获知物品的欢迎程度或者每个顾客的购物偏好等信息，难以获知顾客在物品选购过程中都接触过哪些物品，以及对各种物品的具体选择过程，导致对顾客购物行为的分析精确度较低；另外，这种方式需要每个物品都粘贴射频标签；由于射频标签本身成本较高，且回收再利用率较低，导致购物场所的整体营业成本较高。

发明内容

有鉴于此，本发明的目的在于提供一种信息关联方法、装置和系统，以提高顾客购物行为分析的精确性，同时降低成本。

第一方面，本发明实施例提供了一种信息关联方法，该方法包括：获取目标区域内的多个视频帧图像；从多个视频帧图像中识别目标对象在指定位置范围内的物品处理动作轨迹；如果物品处理动作轨迹中包含指定的处理动作，获取处理动作对应物品的物品信息；将物品信息与目标对象关联。

进一步，本发明实施例提供了第一方面的第一种可能的实施方式，上述从多个视频帧图像中识别目标对象在指定位置范围内的物品处理动作轨迹的步骤之前，方法还包括：通过第一神经网络对视频帧图像进行人脸检测，得到目标对象的人脸数据；通过第二神经网络对人脸数据进行人脸特征提取，得到目标对象的人脸特征。

进一步，本发明实施例提供了第一方面的第二种可能的实施方式，上述从多个视频帧图像中识别目标对象在指定位置范围内的物品处理动作轨迹的步骤之前，方法还包括：通过第三神经网络对视频帧图像进行行人检测，得到目标对象的人形数据；人形数据通过行人检测框标识；根据预设的坐标系确定目标对象的位置信息；坐标系通过摄像装置在目标区域内的位置建立；通过第四神经网络对人形数据进行人形特征提取，得到目标对象的人形特征；将多个视频帧图像中，相邻视频帧图像之间的人形特征的数值距离小于设定数值阈值的人形数据，确定为同一个目标对象的人形数据；连接同一个目标对象的人形数据，得到目标对象的位置移动轨迹。

进一步，本发明实施例提供了第一方面的第三种可能的实施方式，上述方法还包括：如果多个视频帧图像中包含多组视频帧图像，分别识别每组视频帧图像中目标对象的位置移动轨迹；其中，每组视频帧图像来自同一摄像装置；根据目标对象的人脸特征，以及每组视频帧图像对应的目标对象的位置移动轨迹，生成目标对象的最终位置移动轨迹。

进一步，本发明实施例提供了第一方面的第四种可能的实施方式，上述从多个视频帧图像中识别目标对象在指定位置范围内的物品处理动作轨迹的步骤，包括：根据目标对象的位置信息以及物品货架的位置信息，确定目标对象与物品货架的空间距离；从目标对象的位置移动轨迹中，提取空间距离小于设定空间阈值的轨迹片段；对轨迹片段进行采样处理，得到多个待识别子片段；根据各个待识别子片段中的处理动作，得到对应的物品处理动作轨迹；处理动作包括拿取物品、放回物品或无动作。