[发明专利]家用电器、信息识别方法及装置

说明书

本申请公开了一种家用电器、信息识别方法及装置，用以识别用户对用于存放物品的家用电器的存取操作信息，在无需过多相机的情况下，提高整体检测准确率，节约成本。所述家用电器，包括：用于采集图像的相机；设置在所述相机的图像采集盲区的传感器；处理器，用于通过所述相机采集图像确定视觉检测结果，以及通过所述传感器确定盲区检测信息，并根据所述视觉检测结果和所述盲区检测信息，确定用户对所述家用电器内物品的存取动作和/或所述物品在所述家用电器内的存放位置。

技术领域

本申请涉及智能家电技术领域，尤其涉及家用电器、信息识别方法及装置。

背景技术

在家用智能冰箱领域，为了帮助用户更好的管理冰箱内的食材，冰箱需要自动识别出冰箱内的食材及存放位置。

一种方案是用静态计算机视觉方案，也就是通过拍摄冰箱内的静态图片并分析食材种类。但是由于冰箱内食材存放比较满，外部堆放的食材会遮挡存放在内部的食材，造成识别结果不全面。

另一种方案是动态计算机视觉方案，也就是通过识别用户的动态取放动作，实时监测用户放入了什么食材和取出了什么食材。

动态视觉方案视野需要覆盖冰箱全空间，但是由于冰箱的箱体、门体、冷冻区多个位置视野较大，单个相机拍摄会导致冰箱隔板第一层和门体存在盲区，若单纯利用相机覆盖需要堆叠多个相机，多个相机之间的标记是难点问题，而且，视觉物体检测需要大量的计算资源，对硬件平台要求高，造成整体硬件成本高昂。

发明内容

本申请实施例提供了一种家用电器、信息识别方法及装置，用以识别用户对用于存放物品的家用电器的存取操作信息，在无需过多相机的情况下，提高整体检测准确率，节约成本。

本申请实施例提供的一种用于存放物品的家用电器包括：

用于采集图像的相机；

设置在所述相机的图像采集盲区的传感器；

处理器，用于通过所述相机采集图像确定视觉检测结果，以及通过所述传感器确定盲区检测信息，并根据所述视觉检测结果和所述盲区检测信息，确定用户对所述家用电器内物品的存取动作和/或所述物品在所述家用电器内的存放位置。

本申请实施例提供的上述家用电器，通过相机采集图像，确定视觉检测结果，并且通过设置在所述相机的图像采集盲区的传感器确定盲区检测信息，从而根据所述视觉检测结果和所述盲区检测信息，确定用户对所述家用电器内物品的存取动作和/或所述物品在所述家用电器内的存放位置，即实现了识别用户对用于存放物品的家用电器的存取操作信息，在无需过多相机的情况下，提高了整体检测准确率，节约成本。

可选地，所述处理器当通过所述视觉检测结果，确定所述图像采集盲区的预设感兴趣区域ROI内用户对所述家用电器内物品的存取动作时，进一步结合所述传感器的盲区检测信息，确定用户对所述家用电器内物品的存取动作和/或所述物品在所述家用电器内的存放位置。

可选地，所述处理器当通过所述视觉检测结果，确定所述图像采集盲区的预设感兴趣区域ROI内用户对所述家用电器内物品的存取动作之后的预设时长内，等待通过所述传感器获取盲区检测信息，根据在所述预设时长内是否通过所述传感器获取了盲区检测信息，确定所述物品在所述家用电器内的存放位置。

可选地，所述预设时长是根据用户存取动作的速度确定的，所述用户存取动作的速度是通过对所述相机采集的图像进行检测确定的。

可选地，所述处理器还用于：当用户在所述图像采集盲区之外对所述家用电器内物品进行存取操作时，直接通过所述相机采集的图像，确定用户对所述家用电器内物品的存取动作和/或所述物品在所述家用电器内的存放位置。