[发明专利]一种交互方法、装置、电子设备和存储介质

说明书

本公开实施例公开了一种交互方法、装置、电子设备和存储介质。所述方法包括：获得包含有目标对象的图像，识别所述图像中的所述目标对象的手部的状态；在识别到所述目标对象的手部处于第一状态下，对所述目标对象的手部的位置信息进行跟踪；基于跟踪到的所述手部的位置信息在显示界面中显示操作点，所述操作点处于与所述第一状态对应的第一操作状态。

技术领域

本公开涉及计算机视觉技术领域，具体涉及一种交互方法、装置、电子设备和存储介质。

背景技术

近些年来，触摸交互方式在手机、平板电脑等移动终端中有大量应用和交互设计，交互体验有极大的提升。然而隔空交互方式由于成本高、稳定性不高、体验受限等问题，并未广泛使用。

发明内容

为解决现有存在的技术问题，本公开实施例提供一种交互方法、装置、电子设备和存储介质。

为达到上述目的，本公开实施例的技术方案是这样实现的：

本公开实施例提供了一种交互方法，所述方法包括：

获得包含有目标对象的图像，识别所述图像中的所述目标对象的手部的状态；

在识别到所述目标对象的手部处于第一状态下，对所述目标对象的手部的位置信息进行跟踪；

基于跟踪到的所述手部的位置信息在显示界面中显示操作点，所述操作点处于与所述第一状态对应的第一操作状态。

在本公开的一些可选实施例中，所述方法还包括：识别到所述目标对象的手部由所述第一状态切换到第二状态时，在所述显示界面中的第一操作位置显示与所述第二状态对应的第二操作状态的所述操作点，并在所述第一操作位置执行与所述第二操作状态对应的响应操作。

在本公开的一些可选实施例中，所述方法还包括：在所述目标对象的手部的状态切换后，重新对所述目标对象的手部的位置信息进行跟踪。

在本公开的一些可选实施例中，所述方法还包括：识别到所述目标对象的手部由所述第一状态或第二状态切换至其他状态时，检测所述其他状态的持续时长；所述其他状态为除所述第一状态和所述第二状态以外的状态；

当所述持续时长不超过预设时长、所述目标对象的手部由所述其他状态重新切换至所述第一状态或所述第二状态时，持续对所述目标对象的手部进行跟踪，并基于所述手部的位置信息在显示界面中显示操作点，所述操作点处于与所述第一状态对应的第一操作状态或者与所述第二状态对应的第二操作状态。

在本公开的一些可选实施例中，所述方法还包括：当所述持续时长超过所述预设时长时，终止在所述显示界面中显示所述操作点。

在本公开的一些可选实施例中，所述第一状态为手掌状态，所述第一操作状态表示未触摸屏幕状态。

在本公开的一些可选实施例中，所述第二状态为握拳状态或指定状态；所述第二操作状态表示触摸屏幕状态或指定触摸状态。

在本公开的一些可选实施例中，所述方法还包括：为所述手部分配第一标识，为所述操作点分配第二标识，建立所述第一标识和所述第二标识的映射关系，所述映射关系用于控制所述操作点在所述显示界面中伴随所述手部的移动而移动。

在本公开的一些可选实施例中，响应于所述显示界面中显示对应于多个手部的多个操作点的情况，所述多个操作点的显示参数不同。

在本公开的一些可选实施例中，所述对所述目标对象的手部的位置信息进行跟踪，包括：确定所述图像中的操作区域，识别所述目标对象的手部在所述操作区域的第一位置信息，基于所述第一位置信息对所述手部进行跟踪；

所述基于跟踪到的所述手部的位置信息在显示界面中显示操作点，包括：