[发明专利]冰箱内部食物的种类识别方法与冰箱

说明书

技术领域

本发明涉及储物技术领域，特别是涉及一种冰箱内部食物的种类识别方法与冰箱。

背景技术

随着社会的进步和人们生活水平的提高，消费者在购买食品时不仅关注食品的营养价值与安全，还会考虑价格、口感、外观及新鲜程度等因素，而冰箱的角色也从单纯的存储保鲜逐渐转变为食材管理中心和家庭营养中心，这也对冰箱提出了新的挑战，同时，这也为各种智能识别技术应用在冰箱上提供了契机。了解冰箱中存放食材种类的方式，也从打开冰箱门实际查看变为了智能化识别。利用自动识别技术，在家用冰箱上实现食品的种类识别功能，已经成为智能化冰箱的发展趋势。

自动识别技术就是应用特定识别装置，将被识别物品接近识别装置，自动获取被识别物品的相关信息，并提供给计算机处理系统来完成相关后续处理的一种技术。目前应用于冰箱的自动识别技术包括射频识别和图像识别等，射频识别是在放进冰箱的食材上张贴射频识别码，利用安装在冰箱上的射频识别装置进行识别，该技术需要所购置的食材本身含有射频识别码，而目前市场上的大部分食品都不含有射频识别码，特别是蔬菜、水果，更是不含有识别码，因此该技术受到了很大的应用限制。

图像识别技术也已应用于冰箱上，但是正确识别率较低，由于该技术主要是依赖于对食材图像颜色或者食材形状、纹理的不同进行识别，因此对于颜色、形状相近的食材很难正确识别，比如桔子和橙子很难区别，识别结果为柑类，因此该技术的正确率需要进一步提高。

发明内容

本发明的一个目的是要提供一种准确率高的冰箱内部食物的种类识别方法。

本发明一个进一步的目的是要冰箱识别食物种类的功能便于用户使用。

本发明首先提供了一种冰箱内部食物的种类识别方法，冰箱的储物间室内部形成有识别区域且布置有拍摄角度朝向识别区域的高光谱成像装置，种类识别方法包括：控制高光谱成像装置对识别区域内放置的食物拍摄，并获取拍摄得到的高光谱数据；从高光谱数据中提取出图像特征信息和特征光谱信息；以及使用预设的识别模型对图像特征信息和特征光谱信息进行匹配，以确定出食物的类型。

可选地，高光谱数据包括设定数量的三元数据组，每个三元数据组中包括一个像素点的两个图像像素元素和一个光谱波长元素，每个像素点具有多组三元数据组，并且图像特征信息通过对图像像素元素中数据分析提取得出，特征光谱信息通过对光谱波长元素中的数据分析提取得出。

可选地，使用预设的识别模型对图像特征信息和特征光谱信息进行匹配包括：向布置有识别模型的网络侧设备发送图像特征信息和特征光谱信息，以由网络侧设备使用识别模型对图像特征信息和特征光谱信息进行匹配。

可选地，确定出食物的类型的步骤之后还包括：向用户输出识别结果，并接收用户对识别结果的反馈，在反馈结果为正确的情况下，记录识别结果以及对应的图像特征信息和特征光谱信息，以作为识别模型的后续训练样本。

可选地，向用户输出识别结果的步骤包括：向与冰箱绑定的移动终端发送包括识别结果的消息。

可选地，在确定出食物的类型的步骤之后还包括：获取与食物类型匹配的保存信息，并按照保存信息建立食物的储藏档案。

根据本发明的另一个方面，还提供了一种冰箱，其包括：箱体，其内限定有储物间室，储物间室内形成有识别区域；高光谱成像装置，设置于箱体内部并且拍摄角度朝向识别区域，并配置成拍摄识别区域内放置的食物，以得到该食物的高光谱数据；高光谱数据处理装置，配置成从高光谱数据中提取出图像特征信息和特征光谱信息；识别装置，配置成使用预设的识别模型对图像特征信息和特征光谱信息进行匹配，以确定出食物的类型。

可选地，高光谱成像装置使用广角镜头或者鱼眼镜头，并且设置于识别区域的正上方。

可选地，上述冰箱还包括：光源系统，设置于识别区域内，以为高光谱成像装置提供拍摄光线，其中光源系统的光谱范围设置为400～1100nm。

可选地，光源系统设置于识别区域的顶壁后部，向斜下方提供拍摄光线。

本发明的冰箱内部食物的种类识别方法与冰箱，在冰箱内部设置高光谱成像装置，拍摄得到食物的高光谱数据，综合利用图像信息和光谱信息进行食物的种类识别，识别的准确率高。

进一步地，本发明的冰箱内部食物的种类识别方法与冰箱，还可以利用云技术进行食物的高光谱数据的处理和分析，并直接通过用户终端输出识别信息，大大提高了用户的便利性。

根据下文结合附图对本发明具体实施例的详细描述，本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。