[发明专利]视线跟踪人机交互方法及装置

权利要求书

1、一种视线跟踪人机交互方法，其特征在于，包括：

采集视线跟踪信息，并根据所述视线跟踪信息获取视线焦点位置；

采集面部图像信息，并根据所述面部图像信息识别出面部动作；

根据所述视线焦点位置输出与所述面部动作对应的控制指令。

2、根据权利要求1所述的方法，其特征在于，所述面部动作包括预设开关动作，所述方法具体包括：

采集面部图像信息，根据所述面部图像信息首次识别出所述预设开关动作或识别出所述预设开关动作的次数为奇数后，执行以下步骤：

采集视线跟踪信息，并根据所述视线跟踪信息获取视线焦点位置；

采集面部图像信息，并根据所述面部图像信息识别出面部动作；

根据所述视线焦点位置输出与所述面部动作对应的控制指令。

3、根据权利要求1或2所述的方法，其特征在于，在识别出面部动作之后，根据所述视线焦点位置输出与所述面部动作对应的控制指令之前还包括：

确认识别到面部动作非预设开关动作。

4、根据权利要求1或2所述的方法，其特征在于，在采集视线跟踪信息之后识别出面部动作之前还包括：

确认视线跟踪信息中的视线在预设视线位置范围内。

5、根据权利要求4所述的方法，其特征在于，在确认视线跟踪信息中的视线在预设视线位置范围内之后，识别出面部动作之前还包括：

确认面部图像信息中的面部转角在预设面部转角范围内。

6、根据权利要求1或2所述的方法，其特征在于，在识别出面部动作之后，根据所述视线焦点位置输出与所述面部动作对应的控制指令之前还包括：

确认所述面部动作为预设面部动作且非预设开关动作。

7、根据权利要求1或2所述的方法，其特征在于，还包括：更新面部动作与控制指令的映射关系。

8、一种视线跟踪人机交互装置，其特征在于，包括：

视线跟踪处理单元，用于进行视线跟踪操作，所述视线跟踪操作包括采集视线跟踪信息并根据所述视线跟踪信息获取视线焦点位置；

面部动作识别单元，用于采集面部图像信息并根据所述面部图像信息识别出面部动作；以及

控制指令输出单元，与所述视线跟踪处理单元及所述面部动作识别单元分别连接，用于根据所述视线焦点位置输出与所述面部动作对应的控制指令。

9、根据权利要求8所述的装置，其特征在于，所述面部动作识别单元与所述视线跟踪处理单元连接，当检测到所述面部动作为预设开关动作时，用于通知视线跟踪处理单元，相应地启动或停止视线跟踪操作。

10、根据权利要求8所述的装置，其特征在于，还包括同步处理模块，所述视线跟踪处理单元通过所述同步处理模块与所述面部动作识别单元连接，当检测所述视线跟踪信息中的视线在预设视线位置范围内时，用于通过所述同步处理模块通知面部动作识别单元，根据当前面部图像信息识别出当前面部动作。

11、根据权利要求9所述的装置，其特征在于，所述面部动作识别单元通过所述同步处理模块与所述视线跟踪处理单元连接，当检测所述面部图像信息中的面部转角在预设面部转角范围外时，用于通过所述同步处理模块通知视线跟踪处理单元，检测所述视线跟踪信息中的视线是否在预设视线位置范围内。

12、根据权利要求8-11所述的任一装置，其特征在于，还包括：更新模块，与所述控制指令输出单元连接，用于更新所述控制指令输出单元中的面部动作与控制指令的映射关系。

13、根据权利要求8-11所述的任一装置，其特征在于，所述视线跟踪处理单元包括：

视线跟踪采集模块，用于采集视线跟踪信息；以及

视线跟踪处理模块，与所述视线跟踪采集模块连接，用于根据视线跟踪信息获取视线焦点位置。

14、根据权利要求8-11所述的任一装置，其特征在于，所述面部动作识别单元包括：

面部图像采集模块，用于采集面部图像信息；以及

面部动作识别模块，与所述面部图像采集模块连接，用于根据面部图像信息识别出面部动作。