[发明专利]RPA定位控件元素的组合定位系统、方法、设备及介质

权利要求书

1.一种RPA定位控件元素的组合定位系统，其特征在于，所述组合定位系统包括：

一个第一级定位器，用于定位出控件元素；

至少一个第二级定位器，所述第二级定位器之间递进执行定位任务，每一个所述第二级定位器将所述第一级定位器或上一个所述第二级定位器定位出的控件元素作为已定位的参考控件元素，选取已定位的参考控件元素与待定位的目标控件元素之间相对不变化的特征，并根据已定位的参考控件元素和所述相对不变化的特征对待定位的目标控件元素进行定位；所述第二级定位器包括相对位置定位器、相对路径定位器和文本信息定位器中的至少一种，其中：

所述相对位置定位器用于在第一时刻选取已定位的参考控件元素上的第一坐标点和待定位的目标控件元素的第二坐标点，计算所述第一坐标点与所述第二坐标点之间不变化的相对偏移位置，其中第一坐标点在所述已定位的参考控件元素上的位置与所述第二坐标点在所述待定位的目标控件元素上的位置相对应，并且根据所述第一坐标点和所述相对偏移位置对第二时刻的所述待定位的目标控件元素进行定位；

所述相对路径定位器用于在第一时刻选取已定位的参考控件元素的第一路径和待定位的目标控件元素的第二路径，计算所述第一路径和所述第二路径之间不变化的最小父级窗体层次结构，根据所述第一路径和所述最小父级窗体层次结构对第二时刻的所述待定位的目标控件元素进行定位；

所述文本信息定位器用于在第一时刻选取与已定位的参考控件元素的各子级控件元素唯一对应的第一本文信息和待定位的目标控件元素的第二文本信息，已定位的参考控件元素为待定位的目标控件元素的父级，所述第一本文信息中包含所述第二文本信息，并且根据包含所述第二文本信息的所述第一本文信息对第二时刻的所述待定位的目标控件元素进行定位。

2.根据权利要求1所述的RPA定位控件元素的组合定位系统，其特征在于，所述第一坐标点包括所述参考控件元素的矩形边中点、矩形中点和矩形顶点中的其中一点。

3.根据权利要求1所述的RPA定位控件元素的组合定位系统，其特征在于，所述第一本文信息中包括文字特征、字体特征、字号特征和颜色特征中的至少一种。

4.一种RPA定位控件元素的组合定位方法，其特征在于，包括如下步骤：

接收第一级定位器或上一个执行定位任务的第二级定位器定位的控件元素；

将所述定位的控件元素作为已定位的参考控件元素，并选取所述已定位的参考控件元素与待定位的目标控件元素之间相对不变化的特征，根据已定位的参考控件元素和所述相对不变化的特征对待定位的目标控件元素进行定位；选取所述已定位的参考控件元素与待定位的目标控件元素之间相对不变化的特征，根据已定位的参考控件元素和所述相对不变化的特征对待定位的目标控件元素进行定位，包括如下至少之一：

在第一时刻选取已定位的参考控件元素上的第一坐标点和待定位的目标控件元素的第二坐标点，计算所述第一坐标点与所述第二坐标点之间不变化的相对偏移位置，其中第一坐标点在所述已定位的参考控件元素上的位置与所述第二坐标点在所述待定位的目标控件元素上的位置相对应，并且根据所述第一坐标点和所述相对偏移位置对第二时刻的所述待定位的目标控件元素进行定位；

在第一时刻选取已定位的参考控件元素的第一路径和待定位的目标控件元素的第二路径，计算所述第一路径和所述第二路径之间不变化的最小父级窗体层次结构，根据所述第一路径和所述最小父级窗体层次结构对第二时刻的所述待定位的目标控件元素进行定位；

在第一时刻选取与已定位的参考控件元素的各子级控件元素唯一对应的第一本文信息和待定位的目标控件元素的第二文本信息，已定位的参考控件元素为待定位的目标控件元素的父级，所述第一本文信息中包含所述第二文本信息，并且根据包含所述第二文本信息的所述第一本文信息对第二时刻的所述待定位的目标控件元素进行定位。

5.根据权利要求4所述的RPA定位控件元素的组合定位方法，其特征在于，所述第一坐标点包括所述参考控件元素的矩形边中点、矩形中点和矩形顶点中的其中一点。

6.根据权利要求4所述的RPA定位控件元素的组合定位方法，其特征在于，所述第一本文信息中包括文字特征、字体特征、字号特征和颜色特征中的至少一种。