[发明专利]终端操控方法及装置

权利要求书

1.一种终端操控方法，其特征在于，所述方法包括：

通过调用终端操作系统提供的界面监控服务，识别终端显示界面所含的操控对象；

根据接收到的用户输入信息，从所述操控对象中确定出目标对象；

触发执行针对所述目标对象的目标操作。

2.根据权利要求1所述的方法，其特征在于，当所述终端操作系统为安卓Android操作系统时，所述界面监控服务包括AccessbilitySevice服务。

3.根据权利要求1所述的方法，其特征在于，所述用户输入信息包括用户语音；所述根据接收到的用户输入信息，从所述操控对象中确定出目标对象，包括：

通过人工智能语音服务对所述用户语音进行处理，以识别出所述用户语音指示的对象信息；

根据所述对象信息从所述操控对象中确定出目标对象。

4.根据权利要求3所述的方法，其特征在于，当所述目标操作涉及针对所述目标对象的触摸动作时，所述触发执行针对所述目标对象的目标操作，包括：

执行针对所述目标对象的模拟触摸动作，以完成所述目标操作。

5.根据权利要求3所述的方法，其特征在于，所述根据所述对象信息从所述操控对象中确定出目标对象，包括：

获取操控对象在所述终端显示界面中对应的显示信息；

在所述对象信息匹配于任一操控对象的显示信息的情况下，将所述任一操控对象确定为所述目标对象。

6.根据权利要求5所述的方法，其特征在于，所述获取操控对象在所述终端显示界面中对应的显示信息，包括：

若所述操控对象为文本对象，则通过调用所述文本对象的应用程序接口获取所述文本对象对应的显示信息；

若所述操控对象为图形对象，则截屏所述图形对象的对应区域，并基于截屏所得的图像确定所述图形对象对应的显示信息。

7.根据权利要求3所述的方法，其特征在于，

还包括：在所述终端显示界面中示出对应于各个操控对象的对象标识；

所述根据所述对象信息从所述操控对象中确定出目标对象，包括：

将匹配于所述对象标识的操控对象确定为所述目标对象。

8.根据权利要求1所述的方法，其特征在于，所述用户输入信息包括用户操作手势，所述根据接收到的用户输入信息，从所述操控对象中确定出目标对象，包括：

确定所述用户操作手势对应的位置信息；

确定所述操控对象中匹配于所述位置信息的操控对象，以作为所述目标对象。

9.根据权利要求1所述的方法，其特征在于，

所述目标操作为预定义的默认操作；或者，

所述方法还包括：根据所述用户输入信息确定针对所述目标对象的所述目标操作。

10.根据权利要求9所述的方法，其特征在于，所述触发执行针对所述目标对象的目标操作，包括：

在所述目标操作属于所述终端操作系统中预定义的系统级操作的情况下，通过调用所述终端操作系统的预设功能或者唤起终端设备上安装的预设应用程序，以针对所述目标对象执行所述目标操作；

在所述目标操作属于所述目标对象所属应用程序中预定义的应用级操作的情况下，向所述应用程序发送根据针对所述目标对象的目标操作指令，以使所述应用程序根据所述目标操作指令执行所述目标操作。

11.一种终端操控装置，其特征在于，所述装置包括：

对象识别单元，用于通过调用终端操作系统提供的界面监控服务，识别终端显示界面所含的操控对象；

对象确定单元，用于根据接收到的用户输入信息，从所述操控对象中确定出目标对象；

操作执行单元，用于触发执行针对所述目标对象的目标操作。