[发明专利]目标匹配方法和系统

说明书

本说明书提供的目标匹配方法和系统，对于多个视角下多个视频中任意的两个视频，可以获取这两个视频的同步帧，根据所述同步帧中每个目标的人物识别质量自适应地从人体特征和人脸特征中为每个目标选择目标特征，并根据目标特征关联这两个视频中的同一个目标，以实现这两个视频中同一目标的匹配，进而实现对所述多个不同视角下同一目标的匹配。也即是，本说明书能够自适应地从人体特征和人脸特征中选择目标特征，进而根据目标特征将多个视角下的同一目标进行有效关联，基于此，能够得到任意一个目标在空间场景中的绝对动线，从而更好地赋能商家的消费者分析需求。

技术领域

本说明书涉及图像处理领域，尤其涉及一种目标匹配方法和系统。

背景技术

无人售货店铺(如无人零售小店)是近年来比较热门的研究领域，而监控摄像头往往是无人售货店铺必不可少的硬件设备。在该研究领域中，通常需要分析出不同消费者的购物习惯、购物路径以及用户画像等消费者信息，而这些需求的前提是要在无人售货店铺的每个监控摄像头下准确地检测出消费者，而且对于多个不同视角的摄像头而言，还会涉及到多个视角之间的目标匹配问题。

发明内容

本说明书提供的目标匹配方法和系统，可以根据目标特征将多个视角下的同一目标进行有效关联。

第一方面，本说明书提供一种目标匹配方法，包括：获取多个不同视角下一一对应的多个视频；以及通过对所述多个视频中每两个视频进行目标匹配，实现对所述多个不同视角下同一目标的匹配，包括，对任意的第一视频和第二视频：确定所述第一视频和所述第二视频的多对同步帧，每对所述同步帧包括所述第一视频的第一图像帧和所述第二视频的第二图像帧，所述第一图像帧和所述第二图像帧的拍摄时间相同，根据所述同步帧中每个目标的人物识别质量从人体特征和人脸特征中为所述目标选择目标特征，以及根据所述目标特征关联所述第一视频和所述第二视频中的同一个所述目标。

在一些实施例中，对于所述多个视频的每个视频，所述方法还包括：对所述视频的每帧分别进行人体检测和人脸检测，得到所述每帧中所述目标的人体检测框和人脸检测框，同一个所述目标的所述人体检测框和所述人脸检测框的标识相同；以及根据所述每帧的人体检测框在所述视频的多帧图像之间进行人体跟踪，以及根据所述每帧的人脸检测框在所述多帧图像之间进行人脸跟踪。

在一些实施例中，所述根据所述同步帧中每个目标的人物识别质量从人体特征和人脸特征中为所述目标选择目标特征包括：提取所述同步帧中所述每个目标的人体特征和人脸特征；根据所述人体特征估计所述每个目标的姿态；计算每个姿态的质量得分；以及根据所述质量得分从所述人体特征和所述人脸特征中为所述目标选择所述目标特征。

在一些实施例中，所述根据所述质量得分从所述人体特征和所述人脸特征中为所述目标选择所述目标特征包括：当所述质量得分大于或等于质量阈值时，所述目标特征为所述人体特征；或者当所述质量得分小于所述质量阈值时，所述目标特征为所述人脸特征。

在一些实施例中，所述方法还包括：获取所述每个目标的特征矩阵，所述特征矩阵包括表示所述人体特征的人体向量和表示所述人脸特征的人脸向量；以及当所述质量得分大于或等于质量阈值时，增大所述人体向量的权重，使所述人体向量的权重大于所述人脸向量的权重；或者当所述质量得分小于所述质量阈值时，增大所述人脸向量的权重，使所述人脸向量的权重大于所述人体向量的权重。

在一些实施例中，所述根据所述每个目标的所述目标特征关联所述第一视频和所述第二视频中的同一个目标包括：获取所述第一图像帧中每个目标的第一特征矩阵与所述第二图像帧中每个目标的第二特征矩阵；以及将至少一个所述第一特征矩阵与至少一个所述第二特征矩阵一一对应进行相似度匹配，得到所述同步帧的匹配矩阵，所述匹配矩阵用于关联所述同步帧中的同一个目标，从而关联所述第一视频和所述第二视频中的同一个目标。

在一些实施例中，所述关联所述第一视频和所述第二视频中的同一个目标之后：筛选出所述第一视频和所述第二视频中的多个关键帧；以及将所述多个关键帧整合成结果序列，所述结果序列包括所述每个目标的绝对动线。