[发明专利]手掌位置确定方法、装置、电子设备及存储介质

说明书

本申请提供一种手掌位置确定方法、装置、电子设备及存储介质。所述方法，先检测目标手掌的关键点，对目标手掌掌根的关键点和同属一个手指的多个关键点进行线性拟合，得到与多个手指对应的线性拟合直线，由多个线性拟合直线确定目标手掌的倾斜度，结合关键点的位置，得到一个涵盖目标手掌所有关键点的位置框，可以指示目标手掌的大小和位置。基于初步检测得到的关键点来分析手掌的倾斜度，基于倾斜度，结合得到的所有关键点得到位置框，可以确保生成的位置框的倾斜度、大小与目标手掌基本一致，定位也更为精确，后续基于该位置框进行手势识别及目标手掌的持续追踪时，可以减少图像中背景环境的干扰或者遗漏关键点，确保特征的提取更为准确。

技术领域

本发明涉及人机交互领域，尤其涉及手掌位置确定方法、装置、电子设备及存储介质。

背景技术

由于计算机视觉技术的发展，在人机交互领域，基于计算机视觉的手势控制已经成为被广泛应用的一种交互方式，手势控制通常是使用摄像头跟踪人体动作行为，通过人的动作姿态向设备发送控制指令。这样可以无需遥控器等控制设备，或鼠标键盘等传统输入输出设备，即可在一定距离范围内实现徒手遥控设备。但是，很多的手势识别场景都非常依赖于准确框出手的位置和大小，而目前常用的基于深度学习的目标检测算法通常只能大概框出手的位置和大小，其精度并不高，进而也会影响后续手势识别的准确性。因此，如何实现手掌位置的准确定位是一个值得研究的问题。

发明内容

基于上述现状，本申请的主要目的在于提供手掌位置确定方法、装置、电子设备及存储介质，能够根据手掌关键点分析手的倾斜度，以该倾斜度确定可以定位手掌位置的矩形框，以确定手掌大小以及位置。

为实现上述目的，本申请采用的技术方案如下：

一种手掌位置确定方法，所述方法包括：

对包含目标手掌的待检测图像进行关键点检测，确定所述目标手掌的各个关键点；

对所述目标手掌掌根的关键点和同属一个手指的多个关键点进行线性拟合，得到与多个手指对应的线性拟合直线；

根据多个所述线性拟合直线的斜率确定所述目标手掌的倾斜度；

依据所述倾斜度和所述目标手掌各个关键点的位置，得到指示所述目标手掌的大小和位置的位置框，所述位置框涵盖所述目标手掌的所有关键点。

在一种可能的实现方式中，对包含目标手掌的待检测图像进行关键点检测前，所述方法还包括：

通过目标检测定位模型对获取的图像进行目标手掌的预定位，得到预定位结果；

依据所述预定位结果从所述获取的图像中裁剪包含所述目标手掌的子图像，得到所述待检测图像。

在一种可能的实现方式中，所述根据多个所述线性拟合直线的斜率确定所述目标手掌的倾斜度包括：

根据所述多个线性拟合直线的斜率确定对应的多个倾斜角；

去除所述多个倾斜角中的离群值后，得到多个有效倾斜角；

对所述多个有效倾斜角求取平均值，得到平均角度，确定所述平均角度为所述目标手掌的倾斜度。

在一种可能的实现方式中，所述依据所述倾斜度和所述目标手掌各个关键点的位置，得到指示所述目标手掌的大小和位置的位置框包括：

依据所述倾斜度，确定所述目标手掌的方向；

若所述目标手掌的方向为竖直或水平方向，根据所述目标手掌各个关键点的位置计算初始检测框的四个顶点位置，根据初始检测框确定所述位置框；

若所述目标手掌的方向不是竖直或水平方向，计算初始检测框的四边对应的函数，依据所述初始检测框确定所述位置框。