[发明专利]一种基于徒手和单目摄像头实现人机交互的方法和装置

权利要求书

1.一种基于徒手和单目摄像头实现人机交互的方法，其特征在于，所述方法包括：

采集用户的单手徒手图像；

检测所述徒手图像中单手的尺寸和/或位置以及所述尺寸的变化⊿S和/或所述位置的变化⊿P；

根据所述尺寸的变化⊿S和/或所述位置的变化⊿P，生成相应的操作指令输出至终端，以使所述终端执行与所述操作指令相应的操作。

2.根据权利要求1所述的方法，其特征在于，所述终端执行与所述操作指令相应的操作包括执行对鼠标指针的移动；

所述根据所述尺寸的变化⊿S和/或所述位置的变化⊿P，生成相应的操作指令输出至终端，以使所述终端执行与所述操作指令相应的操作包括：

若所述尺寸的变化⊿S小于第一阈值M_1s且所述位置在同一平面内存在所述变化⊿P，则通过几何映射方法将所述经过变化后的位置映射为鼠标指针在屏幕中的位置T；

根据所述映射结果，向所述终端输出第一操作指令以使所述终端根据所述第一操作指令移动所述鼠标指针。

3.根据权利要求1所述的方法，其特征在于，所述终端执行与所述操作指令相应的操作包括执行对鼠标的点击，所述点击包括单击或双击；

所述根据所述尺寸的变化⊿S和/或所述位置的变化⊿P，生成相应的操作指令输出至终端，以使所述终端执行与所述操作指令相应的操作包括：

根据所述尺寸的变化⊿S和所述位置的变化⊿P，获得检测的结果为鼠标指针移动至屏幕上需要点击的位置；

若所述检测的结果为所述鼠标指针移动至屏幕上需要点击的位置后，在时间⊿t₃内所述⊿S仅发生一次变化过程C_P，则向所述终端输出第二操作指令以使所述终端根据所述第二操作指令执行对所述鼠标的单击，若所述检测的结果为所述鼠标指针移动至屏幕上需要点击的位置后，在时间⊿t₄内所述⊿S连续两次发生所述变化过程C_P，则向所述终端输出第三操作指令以使所述终端根据所述第二操作指令执行对所述鼠标的双击；

所述变化过程C_P为所述⊿S先大于0并且在时间⊿t₁内累计所得⊿S大于第二阈值B_2s，然后所述⊿S小于0并且在时间⊿t₂内累计所得⊿S的绝对值大于第三阈值B_3s。

4.根据权利要求1所述的方法，其特征在于，所述终端执行与所述操作指令相应的操作包括对对象的拖拽；

所述根据所述尺寸的变化⊿S和/或所述位置的变化⊿P，生成相应的操作指令输出至终端，以使所述终端执行与所述操作指令相应的操作包括：

根据所述尺寸的变化⊿S和所述位置的变化⊿P，获得检测的结果为鼠标指针移动至屏幕上需要拖拽的对象；

在所述鼠标指针移动至屏幕上需要拖拽的对象后，若检测到所述⊿S大于0并且在时间⊿t₁内累计所得⊿S大于第二阈值B_2s时，记录对所述对象的选定；

根据所述尺寸的变化⊿S和所述位置的变化⊿P，获得检测的结果为所述鼠标指针移动至目标位置；

在所述目标位置检测到所述⊿S小于0并且在时间⊿t₂内累计所得⊿S的绝对值大于第三阈值B_3s时，记录对所述对象的释放；

向所述终端输出第四操作指令以使所述终端根据所述第四操作指令执行对所述对象的拖拽。

5.根据权利要求1所述的方法，其特征在于，所述终端执行与所述操作指令相应的操作包括执行对鼠标左键或右键的长摁；

所述根据所述尺寸的变化⊿S和/或所述位置的变化⊿P，生成相应的操作指令输出至终端，以使所述终端执行与所述操作指令相应的操作包括：

根据所述尺寸的变化⊿S和所述位置的变化⊿P，获得检测的结果为鼠标指针移动至屏幕上的目标位置；

在所述鼠标指针移动至屏幕上的目标位置后，若检测到所述⊿S大于0并且在时间⊿t₁内累计所得⊿S大于第二阈值B_2s时，记录对所述目标位置的选定；

保持对所述目标位置的选定至一段时间；

向所述终端输出第五操作指令以使所述终端根据所述第五操作指令执行对所述鼠标左键或右键的长摁。