[发明专利]动态键盘操作方法、装置、存储介质及电子设备

说明书

本公开涉及一种动态键盘操作方法、装置、存储介质及电子设备，用于解决利用现有技术难以对动态键盘进行自动化测试的技术问题。该方法应用于具有触摸屏的电子设备，电子设备中存储有所有按键的基准特征值，方法包括：在电子设备发生预设的触发事件时，获取动态键盘在当前显示界面的位置信息；根据位置信息分割动态键盘的图像，得到多个按键的字符图像，其中，字符图像携带对应按键的定位标记；计算每一字符图像的特征值；若字符图像的特征值与目标按键的基准特征值一致，则确定该字符图像为目标字符图像；按照目标字符图像的定位标记执行点击操作。

技术领域

本公开涉及自动化测试技术领域，具体地，涉及一种动态键盘操作方法、装置、存储介质及电子设备。

背景技术

随着互联网的大规模应用，网上银行、电子商务等业务已经融入我们的生活，但信息技术的高速发展也带来了信息安全隐患，例如用户在使用网上银行或网购系统时，账号及口令被盗事件屡见不鲜。为了有效保护用户信息安全，动态键盘技术应运而生。

在现有技术中，对于UI自动化测试一般通过控件属性进行定位，并模拟各种操作，以达到自动执行测试的目的。然而，出于用户信息安全的考虑，应用的密码输入一般采用动态键盘，由于该键盘上各字符键位分布随机，因而利用传统的UI自动化测试工具无法对动态键盘进行自动测试。

发明内容

本公开的目的是提供一种动态键盘操作方法、装置、存储介质及电子设备，用于解决利用现有技术难以对动态键盘进行自动化测试的技术问题。

为了实现上述目的，本公开第一方面提供一种动态键盘操作方法，应用于具有触摸屏的电子设备，所述电子设备中存储有所有按键的基准特征值，所述方法包括：

在所述电子设备发生预设的触发事件时，获取所述动态键盘在当前显示界面的位置信息；

根据所述位置信息分割所述动态键盘的图像，得到多个按键的字符图像，其中，所述字符图像携带对应按键的定位标记；

计算每一字符图像的特征值；

若所述字符图像的特征值与目标按键的基准特征值一致，则确定该字符图像为目标字符图像；

按照所述目标字符图像的定位标记执行点击操作。

可选地，所述根据所述位置信息分割所述动态键盘的图像，得到多个按键的字符图像，包括：

根据所述位置信息截取所述动态键盘的图像；

将所述动态键盘的图像按照按键边界进行分割，以得到多个按键的字符图像。

可选地，所述计算每一字符图像的特征值，包括：

计算所述字符图像所有像素点的灰度值；

根据每一所述像素点的灰度值与预设灰度均值的大小关系，确定每一字符图像的特征值。

可选地，通过如下公式计算所述预设灰度均值aHash：

其中，(x，y)表示任一像素点的坐标，G(x,y)表示坐标为(x，y)的像素点的灰度值，w、h分别表示所述动态键盘的图像的水平像素和垂直像素。

本公开第二方面提供一种动态键盘操作装置，所述装置包括：

获取模块，用于在所述电子设备发生预设的触发事件时，获取所述动态键盘在当前显示界面的位置信息；

分割模块，用于根据所述位置信息分割所述动态键盘的图像，得到多个按键的字符图像，其中，所述字符图像携带对应按键的定位标记；

计算模块，用于计算每一字符图像的特征值；