[发明专利]控件的识别方法、装置、终端设备和存储介质

说明书

本申请涉及一种控件的识别方法、装置、终端设备和存储介质，终端设备对当前待识别界面进行截图操作，获取包括链接控件和干扰文本信息的抽样图像；然后，根据链接控件对应的第一像素点与干扰文本信息对应的第二像素点之间的颜色差异，从抽样图像中过滤掉第二像素点，得到包含第一像素点的候选像素坐标集；最后，根据候选像素坐标集中各个像素点的像素值的出现频次，确定链接控件在待识别界面中的位置；其中，上述候选像素坐标集中每个像素点的像素值满足预设像素值范围。采用上述方法可以实现自动识别链接控件，并实现自动提取链接控件关联的文本，提升文本提取的批量化和自动化程度，降低文本提取的工作量。

技术领域

本申请涉及终端技术领域，特别是涉及一种控件的识别方法、装置、终端设备和存储介质。

背景技术

随着互联网的发展，终端设备中应用程序(Application，简称APP)的种类越来越多。APP在为用户提供各种便捷操作的同时，也可能非法侵犯用户的权益。一般情况下，APP在下载后使用之前，会向用户展示隐私协议以获得用户的授权。上述隐私协议中，可能涉及手机用户个人信息的内容。因此，有必要提取各APP的隐私协议的文本内容，以便对各APP的隐私协议进行分析。

常见的隐私协议界面中，包括隐私协议的部分内容、链接控件以及授权操作控件，上述链接控件被点击后可以跳转至完整的隐私协议文本。传统方法中，终端设备可以在APP首次启动时，通过运行脚本以实现自动化点击链接控件，上述脚本中包含了链接控件的预设位置；当链接控件被点击后，终端设备可以自动跳转至该APP的隐私协议界面，然后在该界面上提取隐私协议文本。

但是，不同的APP对应的链接控件位置不同。在对不同的APP进行隐私协议文本提取时，需要调整脚本中携带的链接控件的预设位置坐标以适配不同的APP，导致脚本适配工作量大。

发明内容

本申请实施例提供了一种控件的识别方法、装置、终端设备和存储介质。

一种控件的识别方法，上述包括：

对当前待识别界面进行截图操作，获取抽样图像；其中，抽样图像包括链接控件和干扰文本信息；

根据链接控件对应的第一像素点与干扰文本信息对应的第二像素点之间的颜色差异，从抽样图像中过滤掉第二像素点，得到包含第一像素点的候选像素坐标集；其中，候选像素坐标集中每个像素点的像素值满足预设像素值范围；

根据候选像素坐标集中各个像素点的像素值的出现频次，确定链接控件在待识别界面中的位置。

在其中一个实施例中，上述第一像素点为彩色像素点；第二像素点为非彩色像素点；根据链接控件对应的第一像素点与干扰文本信息对应的第二像素点之间的颜色差异，从抽样图像中过滤掉第二像素点，得到包含第一像素点的候选像素坐标集，包括：

根据预设间隔对抽样图像进行采样，获得各采样点的像素值；

对各采样点的像素值进行过滤，获得彩色像素值对应的彩色像素点的坐标；

根据彩色像素值对应的彩色像素点的坐标，确定包含彩色像素点的候选像素坐标集。

在其中一个实施例中，上述对各采样点的像素值进行过滤，获得彩色像素值对应的彩色像素点的坐标，包括：

针对每个采样点，计算采样点的像素值对应的两两颜色通道值之间的差值；

若差值大于预设阈值，则确定采样点的像素值为彩色像素值，并获取彩色像素值对应的彩色像素点的坐标。

在其中一个实施例中，上述根据候选像素坐标集中各个像素点的像素值的出现频次，确定链接控件在待识别界面中的位置，包括：

在候选像素坐标集对应的像素值中，确定出现频次最多的目标像素值；