[发明专利]一种基于神经网络的烘焙食品识别与收银系统及方法

说明书

技术领域

本发明涉及餐厅烘焙食品收银领域，尤其是涉及一种基于神经网络的烘焙食品识别与收银系统及方法。

背景技术

目前在类似面包店、西饼屋等出售烘培食品的店面中，点货和收银通过人工清点，即手动输入产品数量，类别与价格。烘焙类食品的特点是当日生产，无包装，因此不便使用条形码和FRID贴电子标签。即使用条形码的袋装面包产品，也需要工作人员手动依次扫描条形码。这使得收银和点货过程中，人力劳动大，耗时长，且对于大流量客户的烘培商家来说，人力成本高，在手工点货收银时耗时也较长，为顾客带来诸多不便。

基于FRID的点货系统虽已趋近成熟，但需要在商品上附加电子标签。而商家每日需要消耗的电子标签量大，造成高昂的成本；且电子标签具有一定的厚度，使用不便。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种方便快捷、准确率高的基于神经网络的烘焙食品识别与收银系统及方法。

本发明的目的可以通过以下技术方案来实现：

一种基于神经网络的烘焙食品识别与收银系统，该系统包括盛放烘焙食品的收银托盘、放置收银托盘的收银区、固定在收银区正上方的CCD相机、与CCD相机连接的图像识别模块以及与图像识别模块连接的收银模块，所述的图像识别模块设有用于识别图像的神经网络图像检测单元，该神经网络图像检测单元与CCD相机连接。

优选地，所述的CCD相机的分辨率为1920*1080。

优选地，所述的图像识别模块还包括用于存储烘焙食品特征信息的图像数据库，该图像数据库与神经网络图像检测单元连接。

优选地，所述的收银模块包括与图像识别模块连接的收银数据库、与收银数据库连接的价格计算单元，以及与价格计算单元连接的POS机。

优选地，所述的图像识别模块为PC，所述的PC与CCD相机通过USB连接线连接。

一种烘焙食品识别与收银方法，应用基于神经网络的烘焙食品识别与收银系统，该方法包括以下步骤：

1)图像拍摄：利用固定在收银区正上方的CCD相机对收银托盘中的烘焙食品拍照，将拍摄的三通道彩色图片传入图像识别模块；

2)图像识别：图像识别模块对传入的图像进行检测识别，统计图像中包含的烘焙食品类别及每一种类别的数量，并将统计结果实时地传输至收银模块；

3)账单生成：收银模块根据预设的烘焙食品价格计算账单，账单结算后，账单数据记入收银数据库。

优选地，所述的步骤2)的具体内容为：

21)将三通道彩色图片作为输入数据输入神经网络图像检测单元中的神经网络框架，进入下一步；

22)神经网络框架采用深度卷积网，对输入的三通道彩色图像进行卷积特征提取，获取卷积特征图；

23)采用区域建议网在卷积特征图上获取兴趣区，提取兴趣区对应的特征向量；

24)采用两个全连接层对特征向量进行处理，获取固定维度的特征向量，并分别输入至分类器和回归器；

25)分类器处理特征向量，获取兴趣区内包含的目标种类；回归器处理特征向量，获取兴趣区内包含的目标在图像中的位置。

与现有技术相比，本发明具有以下优点：

一、快速方便：本发明利用高分辨率的CCD相机对收银托盘中的烘焙食品拍照，并通过带有神经网络图像检测单元的图像识别模块对拍摄的图像进行处理，可实时地一次性检测识别所包含的烘焙食品种类和数量，通过收银模块预设的烘焙食品价格，实现实时的快速结账；

二、识别率高：在保证成像清晰完整的条件下，本发明使用基于神经网络的图像识别方法，对百类烘焙食品的识别，准确率在98％以上；

三、成本低：本发明采用分辨率为1920*1080的高清CCD相机，该相机只需一台intel i5级别的CPU或者显存超过2G的独立显卡即可达到实时检测，相比于传统复杂的收银系统，大大降低了成本。

附图说明

图1为一种基于神经网络的烘焙食品识别与收银系统的结构示意图；

图2为一种烘焙食品识别与收银方法的流程图；

图3为本发明实施例中一种烘焙食品识别与收银方法的图像检测识别流程图；

图4为本发明实施例中一种烘焙食品识别与收银方法的神经网络图像检测框架流程图。

图1中标号所示：

1、CCD相机，2、图像识别模块，3、收银模块，4、收银托盘，5、烘焙食品，6、收银区。

具体实施方式

下面结合附图和具体实施例对本发明进行详细说明。