[发明专利]食材信息的确定方法和装置、存储介质及电子装置

说明书

本申请公开了一种食材信息的确定方法和装置、存储介质及电子装置，涉及智慧家庭技术领域，方法包括：在3D单点摄像头检测到冰箱抽屉被打开的情况下，启动深度摄像头，以通过深度摄像头对冰箱抽屉内的食材进行拍照；获取深度摄像头所采集到的食材的第一图像和食材对应的第一深度信息；根据第一深度信息确定食材的存取状态和食材的位置信息，以及对第一图像进行识别，以确定第一图像中的食材的食材种类；在根据位置信息再次确认食材位于冰箱抽屉内的情况下，根据食材的存取状态和食材种类调整食材信息，其中，食材信息为冰箱抽屉存储的食材的信息，采用上述技术方案，解决了无法对冰箱抽屉进行食材识别的问题。

技术领域

本发明涉及通信领域，具体而言，涉及一种食材信息的确定方法和装置、存储介质及电子装置。

背景技术

随着科学技术的进步和人工智能的发展，智能算法也越来越多的应用到日常生活中，特别是对于冰箱而言，作为使用频率较高的生活日常家电之一，其智能化发展是至关重要的，而智能化的最关键问题，就在于对日常生活提供便利。目前智能冰箱在门体上安装摄像头或箱体上安装摄像头拍摄冰箱中的食材，通过图像识别算法得到食材的种类信息。

但是，现有冰箱在冷藏空间中有一个控氧保鲜MSA专区，专区是一个抽屉状的空间，用来保存放入的食材，使食材保存的时间更长，保鲜效果更好，但专区是抽屉式的结构，现有摄像头无法识别专区内的食材的信息。

针对相关技术中，无法对冰箱抽屉进行食材识别的问题，尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种食材信息的确定方法和装置、存储介质及电子装置，以至少解决相关技术中，无法对冰箱抽屉进行食材识别的问题。

根据本发明实施例的一个实施例，提供了一种食材信息的确定方法，包括：在3D单点摄像头检测到冰箱抽屉被打开的情况下，启动深度摄像头，以通过深度摄像头对冰箱抽屉内的食材进行拍照；获取深度摄像头所采集到的食材的第一图像和食材对应的第一深度信息；根据第一深度信息确定食材的存取状态和食材的位置信息，以及对第一图像进行识别，以确定第一图像中的食材的食材种类；在根据位置信息再次确认食材位于冰箱抽屉内的情况下，根据食材的存取状态和食材种类调整食材信息，其中，食材信息为冰箱抽屉存储的食材的信息。

在一个示例性实施例中，启动深度摄像头，包括：通过所述3D单点摄像头获取所述冰箱抽屉相对于所述冰箱的内壁的第一距离；确定所述第一距离与第一预设距离的第一大小关系；在所述第一大小关系指示所述第一距离大于所述第一预设距离的情况下，发送第一拍摄指令给所述深度摄像头，以启动所述深度摄像头。

在一个示例性实施例中，根据所述食材的存取状态和所述食材种类调整食材信息之后，所述方法还包括：通过所述3D单点摄像头获取所述冰箱抽屉相对于所述冰箱的内壁的第二距离；确定所述第二距离与第二预设距离的第二大小关系；在所述第二大小关系指示所述第二距离等于所述第二预设距离的情况下，发送第二拍摄指令给所述深度摄像头，以使所述深度摄像头连续拍摄多张第二图像；在所述多张第二图像中确定第三图像，其中，所述第三图像为所述深度摄像头拍摄的冰箱抽屉中仅包含食材的图像，且所述第三图像的时间戳与当前时间的差值最小；识别所述第三图像以确定所述冰箱抽屉中存储的食材的食材信息。

在一个示例性实施例中，根据所述第一深度信息确定所述食材的存取状态，包括：获取所述食材对应的第二深度信息，其中，所述第二深度信息为所述深度摄像头在获取到所述第一深度信息之前或之后获取到的深度信息；在所述第二深度信息为所述深度摄像头在获取到所述第一深度信息之前获取到的深度信息的情况下，确定所述食材的存取状态为存入状态；在所述第二深度信息为所述深度摄像头在获取到所述第一深度信息之后获取到的深度信息的情况下，确定所述食材的存取状态为取出状态。

在一个示例性实施例中，根据所述食材的存取状态和所述食材种类调整食材信息，包括：在所述存取状态为取出状态的情况下，删除所述食材对应的食材信息；在所述存取状态为存入状态的情况下，增加所述食材对应的食材信息。