[发明专利]基于视觉分析的超市自助结账智能系统

权利要求书

1.一种基于视觉分析的超市自助结账智能系统，其特征在于，包括：摄像头、商品信息提取模块、价格显示模块、商品识别模块、视觉分析模块与视频录制模块；其中：

摄像头，用于采集图像供商品信息提取模块、视觉分析模块与视频录制模块使用；

商品信息提取模块，用于在用户携带所需购买的商品进入商品准备区后提取各个商品的重量及图像信息，还用于在扫码区域获取各个商品的条码信息，且将每一商品的条码、重量及图像信息相关联；

价格显示模块，用于提取商品的条码信息后显示相应商品的价格，并将各个商品的价格相加显示最终的总价格；

商品识别模块，用于根据商品的条码、重量及图像信息进行商品的识别与验证；

视觉分析模块，用于当用户进入商品准备区后，利用视频跟踪技术对用户的行为进行分析识别，直至结账成功；

视频录制模块，用于录制结账视频信息并保存。

2.根据权利要求1所述的一种基于视觉分析的超市自助结账智能系统，其特征在于，所述商品信息提取模块包括：商品条码提取模块，商品重量提取模块，商品图像提取模块；

商品重量提取模块，用于通过计算商品准备区中称重台上总商品重量与取走当前商品后的重量之差，来确定当前商品重量；

商品图像提取模块，用于将摄像头实时采集的商品准备区中当前商品被取走前后的图像做差获得当前商品的图像信息；

所述商品条码提取模块，用于通过扫描枪获取当前商品的条码信息。

3.根据权利要求1所述的一种基于视觉分析的超市自助结账智能系统，其特征在于，所述根据商品的条码、重量及图像信息进行商品的识别与验证包括：

对当前商品的图像信息中提取多个图像特征点；

利用提取的多个图像特征点作为单词，在特征点索引库中检索，选取最相似的一部分商品作为初步结果；

对初步结果与当前商品的图像信息进行特征点几何匹配，去除误识结果；

将去除误识结果后的检索结果与当前商品的重量和条码信息融合，来对当前商品进行验证。

4.根据权利要求1所述的一种基于视觉分析的超市自助结账智能系统，其特征在于，所述利用视频跟踪技术对用户的行为进行分析识别包括：

利用深度图和颜色图进行人体骨骼定位，进而精准定位手部；

对手部的运行轨迹进行跟踪，并利用机器学习分类方法，对非正常的手势进行识别。

5.根据权利要求1所述的一种基于视觉分析的超市自助结账智能系统，其特征在于，该系统还包括：

结算模块，用于通过扫描枪获取用户出示的付款码，完成商品的结算。