[发明专利]设备控制方法、装置、电子设备及存储介质

说明书

本公开提供了一种设备控制方法、装置、电子设备及存储介质，该方法包括：对获取的第一待检测图像进行手部检测，确定与预设手势类别匹配的目标手部的手部检测信息；基于所述目标手部的手部检测信息，对获取的第二待检测图像中与所述目标手部相连的目标肢体进行肢体跟踪检测，并确定所述目标手部在所述第二待检测图像中的手势识别结果；其中，所述第二待检测图像为在所述第一待检测图像之后获取到的图像；基于所述手势识别结果，控制目标设备。

技术领域

本公开涉及计算机视觉技术领域，具体而言，涉及一种设备控制方法、装置、电子设备及存储介质。

背景技术

随着科学技术的发展，人们不断的对人机交互的水平和质量提出新的要求和调整。其中，由于手势具有直观性、自然性等特点，使得手势已成为人机交互的一种重要手段。因此，基于计算机视觉的手势识别成为了人机交互领域的研究重点。

一般的，可以通过获取的图像，确定用户的手势类别，利用确定的手势类别，实现对目标设备的控制，但是在人机交互场景内存在多个用户时，不同用户的手势之间可能存在干扰。因此，目前亟需一种设备控制方案，以解决上述问题。

发明内容

有鉴于此，本公开至少提供一种设备控制方法、装置、电子设备及存储介质。

第一方面，本公开提供了一种设备控制方法，包括：

对获取的第一待检测图像进行手部检测，确定与预设手势类别匹配的目标手部的手部检测信息；

基于所述目标手部的手部检测信息，对获取的第二待检测图像中与所述目标手部相连的目标肢体进行肢体跟踪检测，并确定所述目标手部在所述第二待检测图像中的手势识别结果；其中，所述第二待检测图像为在所述第一待检测图像之后获取到的图像；

基于所述手势识别结果，控制目标设备。

上述方法中，通过对第一待检测图像进行手部检测，确定与预设手势类别匹配的目标手部的手部检测信息，并基于目标手部的手部检测信息，对获取的第二待检测图像中与目标手部相连的目标肢体进行肢体跟踪检测，确定目标手部在第二待检测图像中的手势识别结果。这样可以借助肢体跟踪来实现对不易跟踪检测的目标手部的追踪，进而可以基于手势识别结果，控制目标设备。在诸多用户的手部中，或是在同一用户的两个手部中，通过锁定目标手部，并借助肢体与手部之间的唯一匹配性，以跟踪目标手部为目的进行了肢体跟踪，并以肢体跟踪结果为依据，得到目标手部在第二待检测图像中的手势识别结果，从而有效缓解除目标手部对应的目标用户之外的其他用户的手部动作，对目标用户控制目标设备产生的干扰，提高了目标设备的控制精准度。

由此可见，采用本公开提供的技术方案，可以有效甄别多个用户中用于控制目标设备的目标用户，并在一定程度上，当目标用户的两个手部都存在手部动作的情况下，择一确定目标手部，以对目标设备进行准确控制。需要说明的是，若部分控制操作是通过用户的两个手部分别执行相应动作来触控的，那么采用本公开提供的技术方案可以锁定目标用户，并基于目标用户的两个手部对应的手部动作来实现目标设备的控制。

一种可能的实施方式中，在所述基于所述手势识别结果，控制目标设备之前，还包括：

检测所述目标手部是否满足截止条件；

在检测到所述目标手部满足截止条件的情况下，在所述第二待检测图像中，重新确定与所述预设手势类别匹配的目标手部的手部检测信息。

这里，在检测到目标手部满足截止条件时，表征该目标用户的目标手部不再对目标设备进行控制，则可以重新确定与预设手势类别匹配的目标手部的手部检测信息，使得第二待检测图像中的至少一个用户可以实时的控制目标设备。

一种可能的实施方式中，所述目标手部满足所述截止条件包括以下一种或多种：