[发明专利]一种基于光电鼠标与屏幕通信的人机交互方法

摘要

本发明提供了一种基于光电鼠标与屏幕通信的人机交互方法。本发明提出了一种能够在非触控屏幕上使用触控操作的方法，该方法基于光电鼠标。用户在使用过程中，将光电鼠标放置于显示屏幕之上，来代替手指实现触控、拖拽，甚至多人触控等操作。本发明在无额外硬件要求的情况下，使得用户能够通过鼠标在非触控屏幕上进行点控，拖拽和多人操控等交互操作。其扩展方式简单，无需额外投入和开销，可以广泛适用于数字娱乐，多人间人机交互，幼儿教育等场景。

主权项

1.一种基于光电鼠标与屏幕通信的人机交互方法，其特征在于，包括以下步骤：步骤1、在非触控屏幕的正常显示图层上增加VLP编码图层及方向检测帮助图层，VLP编码图层用于传输VLC信号，方向检测帮助图层用于判断鼠标相对于屏幕的方向；步骤2、将光电鼠标放在非触控屏幕上，VLP编码图层通过屏幕的亮度变化来发送时域VLC信号，通过光电鼠标的光电传感器采集该时域VLC信号，光电鼠标将采集到的时域VLC信号解码后进行VLP定位，从而确定光电鼠标放在非触控屏幕上的具体位置；步骤3、当将光电鼠标从非触控屏幕上的一个位置拖拽至另一个位置时，先获得光电鼠标与屏幕的相对方向，再利用光电鼠标自身对位置移动的追踪能力，利用光电鼠标测算的运动轨迹补全两个VLP位置中移动轨迹，以实现平滑拖拽操作，其中：提前确定光电鼠标相对于屏幕的方向包括以下步骤：步骤301、方向检测帮助图层在光电鼠标所处的区域显示图像一，获得此时方向检测帮助图层上该区域的像素间隔一；步骤302、向检测帮助图层在光电鼠标所处的区域显示与图像一不同的图像二，获得此时方向检测帮助图层上该区域的像素间隔二；步骤303、根据像素间隔一与像素间隔二的宽度变化的方向确定光电鼠标相对于屏幕的方向。