[发明专利]商品取放识别装置及商品取放识别方法

权利要求书

1.一种商品取放识别装置，用于对用户在智能售货柜中取放待售商品时拍摄得到的取放视频进行识别，其特征在于，包括：

帧图像分解部，将所述取放视频分解为多个帧图像；

商品解析部，分别从每一个所述帧图像中解析出该帧图像中含有的各个商品的轮廓和对应的位置信息；

轮廓判定部，基于预定轮廓变形范围判定规则以及预定位置移动范围判定规则，以及根据相邻两个所述帧图像含有的各个所述商品的所述轮廓和所述位置信息，判定出各个所述帧图像中各个所述轮廓之间的对应关系，并将具有该对应关系的所述轮廓所对应的所述商品作为同一所述待售商品；

移动轨迹形成部，将每个所述帧图像中同一所述待售商品的所述位置信息按照时间顺序连接形成所述待售商品的商品移动轨迹；以及

取放判定部，至少根据所述商品移动轨迹判定所述待售商品是否被所述用户取放。

2.根据权利要求1所述的商品取放识别装置，其特征在于：

其中，所述商品的所述轮廓为能够框选出与所述帧图像中该商品的图形大小相适配的范围框，所述位置信息为所述范围框在所述帧图像中的中心点坐标，

所述轮廓判定部具有：

轮廓设定单元，针对相邻两个所述帧图像，将一个所述帧图像中的各个所述轮廓设定为第一轮廓，并将另一个所述帧图像中的各个所述轮廓设定为第二轮廓；

位置移动范围判断单元，根据所述第一轮廓以及所述第二轮廓的所述位置信息计算所述第一轮廓与所述第二轮廓之间的移动距离，并判断该移动距离是否在与所述第二轮廓的边长相对应的位置移动阈值以下；

轮廓变形范围判断单元，判断所述第一轮廓的所述边长是否在与所述第二轮廓的所述边长相对应的轮廓变形范围内；

对应关系判定单元，当所述第一轮廓与所述第二轮廓之间的所述移动距离在所述位置移动范围内，并且所述第一轮廓的所述边长在所述轮廓变形范围内时，将所述移动距离最短的所述第一轮廓与所述第二轮廓判定为具有所述对应关系。

3.根据权利要求2所述的商品取放识别装置，其特征在于：

其中，所述边长为所述范围框的宽度值以及高度值，

所述位置移动阈值为所述高度值乘以预定移动距离系数，该预定移动距离系数的取值范围在1.3至1.7之间，

所述轮廓变形范围为所述边长乘以预定最小变形系数至所述边长乘以预定最大变形系数之间，所述预定最小变形系数为0.6，所述预定最大变形系数为1.7。

4.根据权利要求1所述的商品取放识别装置，其特征在于：

其中，所述商品的所述轮廓为能够框选出与所述帧图像中该商品的图形大小相适配的范围框，所述位置信息为所述范围框在所述帧图像中的中心点坐标，

所述轮廓判定部具有：

标准边长存储单元，存储有与各个所述商品相对应的范围框标准边长；

轮廓设定单元，针对相邻两个所述帧图像，将一个所述帧图像中的各个所述轮廓设定为第一轮廓，并将另一个所述帧图像中的各个所述轮廓设定为第二轮廓；

商品距离计算单元，根据所述第二轮廓在所述帧图像中的边长、对应商品的所述范围框标准边长以及所述摄像头的焦距，计算得到所述商品与所述摄像头之间的商品距离；

位置移动阈值计算单元，根据所述商品距离、所述焦距以及预定实际移动阈值计算得到位置移动阈值；

位置移动范围判断单元，根据所述第一轮廓以及所述第二轮廓的所述位置信息计算所述第一轮廓与所述第二轮廓之间的移动距离，并判断该移动距离是否在所述位置移动阈值以下；

轮廓变形范围判断单元，判断所述第一轮廓的所述边长是否在与所述第二轮廓的所述边长相对应的轮廓变形范围内；

对应关系判定单元，当所述第一轮廓与所述第二轮廓之间的所述移动距离在所述位置移动范围内，并且所述第一轮廓的所述边长在所述轮廓变形范围内时，将所述移动距离最短的所述第一轮廓与所述第二轮廓判定为具有所述对应关系。