[发明专利]用户界面UI元素的信息抓取方法及装置、及存储介质

说明书

本发明实施例提供了一种UI元素的信息抓取方法及装置、及存储介质。所述UI元素的信息抓取方法可包括：检测作用于UI的用户操作，获得所述用户操作所作用的位置参数；根据所述位置参数确定所述用户操作用的目标元素；获取所述目标元素的类型；根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息。

技术领域

本发明涉及信息技术领域，尤其涉及一种用户界面(User Interface，UI)元素的信息抓取方法及装置、及存储介质。

背景技术

在一些情况下，用户在UI界面上进行操作，需要录制用户在UI界面上的操作，则需要确定出目前用户操作的UI元素的信息。但是现有的UI元素的抓取工具或方法都很单一，且抓取的成功率低。

发明内容

有鉴于此，本发明实施例期望提供一种UI元素的信息抓取方法及装置、及存储介质。

本发明的技术方案是这样实现的：

一种用户界面UI元素的信息抓取方法，包括：

检测作用于UI的用户操作，获得所述用户操作所作用的位置参数；

根据所述位置参数确定所述用户操作用的目标元素；

获取所述目标元素的类型；

根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息。

基于上述方案，所述获取所述目标元素的类型，包括以下至少之一：

根据所述目标元素的进程名和/或所述目标元素的类名，确定所述目标元素的类型；

根据所述目标元素的父元素的类型和/或所述目标元素的属性，确定所述目标元素的类型；

根据所述目标元素的父元素的类型和/或所述目标元素的进程名，确定所述目标元素的类型。

基于上述方案，所述根据所述目标元素的进程名和/或所述目标元素的类名，确定所述目标元素的类型，包括以下至少之一：

若所述目标元素的类名和/或所述目标元素的进程名包含有字眼“Sap”，确定所述目标元素为Sap元素；

若所述目标元素的类名和/或所述目标元素的进程名“iexplore”，确定所述目标元素为Web元素。

基于上述方案，所述根据所述目标元素的父元素的类型和/或所述目标元素的属性，确定所述目标元素的类型，包括：

若所述目标元素的父元素为窗口元素，且所述目标元素的属性“FrameworkId”包含“Internet Explorer”字眼，确定所述目标元素为Web元素。

基于上述方案，所述根据所述目标元素的父元素的类型和/或所述目标元素的进程名，确定所述目标元素的类型，包括：

若所述目标元素的父元素为窗口元素，且所述目标元素的进程名包含有字眼“iexplore”，确定所述目标元素为Web元素。

基于上述方案，所述获取所述目标元素的类型，还包括：

若根据目标元素的类名、目标元素的类型、所述目标元素的属性及所述目标元素的进程名无法确定所述目标元素的类型时，确定所述目标元素为WinForm元素。

基于上述方案，所述根据所述目标元素的类型，调用对应的元素抓取工具抓取所述目标元素的信息，包括以下至少之一：

若所述目标元素为Sap元素，调用SapNode类抓取工具抓取所述目标元素的信息；

若所述目标元素为Web元素，调用WebNode类抓取工具抓取所述目标元素的信息；