[发明专利]一种购物流程控制方法、装置和用户终端

说明书

本发明提供了一种购物流程控制方法、装置和用户终端，其中所述方法包括：接收购物指令开启自动售货机的购物仓；对用户的购物行为动作进行识别，并生成提示信息；接收商品取出信号；对用户抓取的商品进行识别，确认用户所抓取商品的商品信息，生成基于商品信息的购物清单；商品信息包括商品品种和商品数量；接收用户关闭购物仓生成的结算指令，根据购物清单显示结算界面。本发明实现了在开放式购物环境中自动对于用户每一步购物流程实时进行提示，并对用户购买商品进行自动识别和判断，生成购物清单，为用户购物流程提供方便，提高了用户购物的效率，降低了人力成本，缩短了结算时间，结算效率高，购物过程简单，提高了用户体验。

技术领域

本发明涉及图像识别技术领域，更具体地说，涉及一种购物流程控制方法、装置和用户终端。

背景技术

物质流通是人类社会的最基本要素。零售行业或直接面向消费者销售的开放式的相关行业(以下简称为零售行业或零售企业)作为当前物质流通的重要手段，需要雇佣大量的收银人员来实现商品的买卖工作，收银人员对消费者所购物品一件一件进行统计，统计完成后，与消费者共同完成支付。

而自动售货柜，则解决了零售行业的人工统计和人工结算的缺陷，是一种面向消费者的无人售货、自动结算的售卖方式。可通过用户的选择，统计出用户所选择的商品的品种种类和总价值，以供用户进行结算，完成支付过程。但目前的自动售货柜只能进行根据用户的选择，自动出货自动结算，并不能在开放的零售购物环境中实现对于用户的购物的行为和所取得的进行准确的识别，从而实现结算。

总之，目前现有的开放式的购物环境中，只能通过人工对于消费者所购得的商品进行逐件的检查、统计和总价计算，耗费大量人力成本，结算时间长效率低，准确度差，而且用户体验差。

发明内容

有鉴于此，本发明提供一种购物流程控制方法、装置和用户终端以解决现有技术的不足。

为解决上述问题，本发明提供一种购物流程控制方法，包括：

接收购物指令，并且根据所述购物指令开启自动售货机的购物仓；

接收用户触发第一红外传感器生成的购物动作开始指令；

根据所述购物动作开始指令，对所述用户的购物行为动作进行识别，并根据所识别出的所述购物动作生成提示信息，以便于根据所述提示信息对用户进行提示；

接收所述用户抓取的商品时所述商品对应的商品电子标签触发的商品取出信号；

基于所述商品取出信号，对所述用户抓取的商品进行识别，确认所述用户所抓取商品的商品信息，生成基于所述商品信息的购物清单；所述商品信息包括商品品种和商品数量；

接收所述用户关闭所述购物仓生成的结算指令，根据所述购物清单显示结算界面，以便于所述用户进行结算。

优选地，所述“根据所述购物动作开始指令，对所述用户的购物行为动作进行识别，并根据所识别出的所述购物动作生成提示信息，以便于根据所述提示信息对用户进行提示”包括：

根据所述购物动作开始指令，采集所述用户的购物行为图像；

提取所述购物行为图像中的初始关键帧，对所述初始关键帧进行识别，确认所述初始关键帧中所述用户的上肢轮廓；

利用kinect的骨骼跟踪技术，根据所述上肢轮廓确定所述用户的上肢关节点的三维坐标；

基于所述上肢关节点的三维坐标，对所述用户的购物行为动作进行识别，并根据所识别出的所述购物动作生成提示信息，以便于根据所述提示信息对用户进行提示。

优选地，所述“基于所述上肢关节点的三维坐标，对所述用户的购物行为动作进行识别，并根据所识别出的所述购物行为动作生成提示信息，以便于根据所述提示信息对用户进行提示”，包括：