[发明专利]基于场景识别的虚拟触摸屏技术的设计方法

权利要求书

1.基于场景识别的虚拟触摸屏技术的设计方法，其特征在于：通过从帧缓冲中读取应用程序各界面的图像数据信息，预先分析和处理的颜色信息特征，找到场景的特征点集。

2.如权利要求1所述的设计方法，其特征在于：当应用程序运行时，仅当接收到用户输入事件时才进行场景识别，即动态地读取帧缓冲中的图像数据，利用场景识别算法判别当前应用的场景。

3.如权利要求1所述的设计方法，其特征在于：预先从帧缓冲中读取应用程序各界面的按钮点位置，分析其布局关系，当已识别到正在运行的应用程序的某个场景时，遥控器的按键信息被解析为鼠标箭头在该场景中按钮位置的滑动或点击操作。

4.如权利要求1所述的设计方法，其特征在于：遥控器对智能操作系统应用程序的控制被模拟成鼠标的控制操作，即遥控器的按键操作被解释成定位鼠标箭头到当前界面的某个点处，并执行点击操作；为此，需要预先获取应用程序中的控制界面，该控制界面是包含按钮点的应用界面，称为场景，该场景能从帧缓冲设备中读取，提取这些场景的中按钮点位置，使得当应用运行到该场景时，遥控器的按键操作可被解释为依次将鼠标箭头移动到这些位置，或进行点击操作。

5.如权利要求4所述的设计方法，其特征在于：采用场景识别算法识别当前场景是属于应用程序所有界面中的某一个；场景识别算法根据预先获得的应用程序的各个场景的图像信息，分析这些场景中颜色信息不同点的位置；选取若干信息不同点作为特征点，每个特征点表示成集合的一个元素A，A包含Rxy和RRGB两个属性，分别表示其坐标位置和颜色值，颜色值为RGB三色值；场景中的特征点构成特征点集S i，1≤i≤N，N表示场景的个数，而该款应用程序中的所有场景中的特征点共同构成超集S，即Si∈S；则场景识别算法表述如下：

1)当应用程序运行时，通过读取当前场景中图像数据信息，记为P，此时i赋值为1，转入2)；

2)根据特征点集Si的Rxy属性，从P中读出Si中元素在Rxy处点的实际颜色值BRGB，若存在对应元素的RRGB不等于BRGB，则转入3)，否则转入4)；

3)将i赋值为i+1，若i不等于N，则搜索Si集合的Rxy属性，即跳转入2)，否则宣告无法识别该场景，退出系统；Si集合的Rxy属性即下一场景的特征点集合；

4)宣告识别出该场景，退出系统；

为识别众多由遥控器操作的应用，需要编写可运行于智能操作系统上的应用管理程序，其功能在于管理可被遥控器操作的多个应用，包括获取用于识别应用的ID，应用的打开和关闭信息，并将这些信息通过进程间通信手段通知给遥控器模拟屏幕点击的程序，后者根据应用的ID和相应的操作信息来辅助对当前场景的识别和遥控器按键的解析。