[发明专利]一种基于移动终端的人机交互方法及系统

说明书

本发明适用于通信领域，提供了基于移动终端的人机交互方法，包括：控制移动终端的摄像头，并通过摄像头实时采集用户面部画面；通过采集到的用户面部画面检测双眼位置；根据检测到的双眼位置提取搜索窗口，并初始化搜索窗口；在搜索窗口中确定双眼眼球的位置，并通过检测眼球区域深色像素连通域的高度来判断双眼的开合状态；根据检测到的双眼的开合状态，发送相应的控制命令给移动终端以实现对应操作。本发明还提供基于移动终端的人机交互系统。本发明所提供的基于移动终端的人机交互及系统可以实现通过眨眼来控制移动终端的操作，进而提高用户的体验。

技术领域

本发明涉及通信领域，尤其涉及一种基于移动终端的人机交互方法及系统。

背景技术

目前，现有的人机交互系统，不管是触摸屏还是按键型都需要有手的介入，才能实现各项功能选择。以阅读手机电子书为例，如果手机是触摸屏手机，则用户需要用手滑动或者点击触摸屏来实现上下页的翻页阅读，如果手机是按键型手机，则用户需要按上下键来实现上下页的翻页阅读，这些操作和功能的选择都离不开手，久而久之，不免会让用户感到枯燥乏味。

而且，虽然目前许多软件也有自动翻页功能，但是需要预先设定翻页间隔时间，由于每页的内容量不同，每个人的阅读速度也不同，预设翻页间隔时间内没看完页面内容就翻页或者在预设翻页间隔时间之前看完而等待翻页，这些无疑都会影响用户的正常阅读，进而导致影响用户的体验。

因此，亟需设计一种操作简单而且全新的用户体验模式，进而达到丰富人机交互形式的效果，增加用户的体验乐趣。

发明内容

有鉴于此，本发明实施例的目的在于提供一种基于移动终端的人机交互方法及系统，旨在解决现有技术中均需要用手来操作完成人机交互的单一模式。

本发明实施例是这样实现的，一种基于移动终端的人机交互方法，所述人机交互方法包括：

控制移动终端的摄像头，并通过所述摄像头实时采集用户面部画面；

通过采集到的用户面部画面检测双眼位置；

根据检测到的双眼位置提取搜索窗口，并初始化所述搜索窗口；

在所述搜索窗口中确定双眼眼球的位置，并通过检测眼球区域深色像素连通域的高度来判断双眼的开合状态；

根据检测到的所述双眼的开合状态，发送相应的控制命令给所述移动终端以实现对应操作。

优选的，所述根据检测到的双眼位置提取搜索窗口的步骤具体包括：

根据眼球有近似圆的特征，利用估计近似圆中心的方法估计眼球的中心；

根据眼球的中心获得眼球的近似外接矩形；

根据所述近似外接矩形以及双眼的位置分别为双眼建立矩形框作为搜索窗口。

优选的，所述通过检测眼球区域深色像素连通域的高度来判断双眼的开合状态的步骤具体包括：

在所述搜索窗口中对图象的各个局部区域进行域值估计；

选取这些局部域值中的最小值，并利用所述最小值对图像的整体区域进行二值化；

根据眼球区域深色像素连通域的高度判断双眼的开合状态。

优选的，所述根据眼球区域深色像素连通域的高度判断双眼的开合状态的步骤具体包括：

记录前n帧图象中眼球区域深色像素连通域的高度的最大值；

若当前帧图象中眼球区域深色像素连通域的高度大于所述最大值的预设倍数时，则判定眼睛为张开，以及若当前帧图象中眼球区域深色像素连通域的高度不大于所述最大值的预设倍数时，则判定眼睛为闭合。