[发明专利]手势识别方法、装置及电子设备

权利要求书

1.一种手势识别方法，包括：

接收用户在第一时刻输入的第一手势轨迹；

将所述第一手势轨迹输入到目标手势识别模型中，获得第一手势指令；其中，所述目标手势识别模型包括第一手势识别模型和第二手势识别模型，所述第一手势识别模型用于识别属于第一类别的手势动作；所述第二手势识别模型至少用于识别属于第二类别的手势动作，以及预测用户下一时刻的手势指令；所述第二手势识别模型是基于样本手势特征信息和用于表征所述样本手势特征信息的用户意图信息训练得到的，所述样本手势特征是根据所述第一手势识别模型识别样本手势轨迹所获取的输出和输入所述样本手势轨迹时的样本时间切片所确定的；

获取第二时刻的第二手势指令，其中，所述第二时刻早于所述第一时刻，所述第二手势指令由所述目标手势识别模型根据所述用户在所述第二时刻输入的第二手势轨迹预测获得；

根据所述第一手势指令和所述第二手势指令，获得目标手势指令。

2.根据权利要求1所述的方法，所述第二手势识别模型通过以下步骤训练获得：

获取样本数据，其中，所述样本数据包括样本手势特征信息和用户意图信息；

使用所述样本数据训练获得满足预设收敛条件的所述第二手势识别模型。

3.根据权利要求2所述的方法，所述样本手势特征信息通过以下步骤获得：

获取任意用户在样本时间切片内输入的样本手势轨迹；

将所述样本手势轨迹输入到所述第一手势识别模型中，获得候选手势指令；

根据所述候选手势指令、所述样本手势轨迹和所述样本时间切片，获得所述样本手势特征信息。

4.根据权利要求3所述的方法，所述根据所述候选手势指令、所述样本手势轨迹和所述样本时间切片，获得所述样本手势特征信息，包括：

获取与所述候选手势指令对应的至少一个关键点手势；

从所述样本手势轨迹中，获取与所述关键点手势对应的样本手势图像；

通过提取所述样本手势图像的特征信息，获得所述样本手势图像对应的特征信息；以及，

获取所述样本手势图像在所述样本时间切片中的时间信息；

通过建立所述特征信息和所述时间信息的特征表示信息，获得所述样本手势特征信息。

5.根据权利要求2所述的方法，所述用户意图信息通过以下步骤获得：

获取用户在输入样本手势轨迹时、输入的表示用户意图的语音数据，其中，所述样本手势特征信息根据所述样本手势轨迹获得；

识别所述语音数据的语义信息，获得所述用户意图信息。

6.根据权利要求1所述的方法，所述第一手势指令和所述第二手势指令中均包含至少一个手势指令；

所述根据所述第一手势指令和所述第二手势指令，获得目标手势指令，包括：

从所述第一手势指令和所述第二手势指令中，获取相匹配的手势指令作为第三手势指令；

根据所述第三手势指令，获得所述目标手势指令。

7.根据权利要求6所述的方法，在所述第三手势指令包括多个手势指令的情况下，所述根据所述第三手势指令，获得所述目标手势指令，包括：

获取所述第三手势指令中的多个手势指令分别对应的置信度；

从所述第三手势指令中，选取数值满足预设条件的置信度所对应的手势指令作为所述目标手势指令。

8.一种手势识别模型的训练方法，包括：

获取样本数据，其中，所述样本数据包括样本手势特征信息和用户意图信息，所述用户意图信息表示所述样本手势特征信息对应的用户意图；

使用所述样本数据训练获得满足预设收敛条件的第二手势识别模型，其中，所述第二手势识别模型至少用于识别属于第二类别的手势轨迹，以及预测用户在下一时刻输入的手势指令；所述样本手势特征是根据第一手势识别模型识别样本手势轨迹所获得的输出和输入所述样本手势轨迹时的样本时间切片所确定的；所述第一手势识别模型用于识别属于第一类别的手势动作。