[发明专利]手势识别方法、装置及电子设备

说明书

本申请公开了一种手势识别方法、装置及电子设备，该方法包括：接收用户在第一时刻输入的第一手势轨迹；将所述第一手势轨迹输入到目标手势识别模型中，获得第一手势指令；获取第二时刻的第二手势指令，其中，所述第二时刻早于所述第一时刻，所述第二手势指令由所述目标手势识别模型根据所述用户在所述第二时刻输入的第二手势轨迹预测获得；根据所述第一手势指令和所述第二手势指令，获得目标手势指令。该方法使得电子设备可以灵活、准确的得到表示用户意图的目标手势指令。

技术领域

本公开涉及手势识别技术领域，更具体地，涉及一种手势识别方法、装置及一种电子设备；本申请同时还涉及一种手势识别模型的训练方法。

背景技术

在用户使用虚拟现实(VR，Virtual Reality)、增强现实(AR，Augmented Reality)以及混合显示(MR，Mixed Reality)等电子设备的过程中，为增强用户沉浸感，一般可以通过接收用户手势并进行手势识别，来接收输入指令，进而实现人机交互。

目前的电子设备在实现手势识别时，一般是固定几种定义手势，并让用户学习这几种手势，以在用户使用电子设备时，通过识别该几种手势，实现用户在各个场景中的交互。

然而，在实现本申请的过程中，发明人发现，现有的基于固定定义手势的手势识别方法，当用户输入的手势为非标准手势或者表示特殊意图的手势时，可能存在识别错误的问题。

发明内容

本公开实施例的一个目的是提供一种用于手势识别的新技术方案，以灵活、准确的识别用户手势。

根据本公开的第一方面，提供了一种手势识别方法，该方法包括：

接收用户在第一时刻输入的第一手势轨迹；

将所述第一手势轨迹输入到目标手势识别模型中，获得第一手势指令；

获取第二时刻的第二手势指令，其中，所述第二时刻早于所述第一时刻，所述第二手势指令由所述目标手势识别模型根据所述用户在所述第二时刻输入的第二手势轨迹预测获得；

根据所述第一手势指令和所述第二手势指令，获得目标手势指令。

可选地，所述目标手势识别模型包括第一手势识别模型和第二手势识别模型，所述第一手势识别模型用于识别属于第一类别的手势轨迹；所述第二手势识别模型至少用于识别属于第二类别的手势轨迹，以及预测用户下一时刻的手势指令；

所述第二手势识别模型通过以下步骤训练获得：

获取样本数据，其中，所述样本数据包括样本手势特征信息和用户意图信息，所述用户意图信息表示所述样本手势特征信息对应的用户意图；

使用所述样本数据训练获得满足预设收敛条件的所述第二手势识别模型。

可选地，所述样本手势特征信息通过以下步骤获得：

获取任意用户在样本时间切片内输入的样本手势轨迹；

将所述样本手势轨迹输入到所述第一手势识别模型中，获得候选手势指令；

根据所述候选手势指令、所述样本手势轨迹和所述样本时间切片，获得所述样本手势特征信息。

可选地，所述根据所述候选手势指令、所述样本手势轨迹和所述样本时间切片，获得所述样本手势特征信息，包括：

获取与所述候选手势指令对应的至少一个关键点手势；

从所述样本手势轨迹中，获取与所述关键点手势对应的样本手势图像；

通过提取所述样本手势图像的特征信息，获得所述样本手势图像对应的特征信息；以及，

获取所述样本手势图像在所述样本时间切片中的时间信息；