[发明专利]触控操作识别方法、装置及相关设备

权利要求书

1.一种触控操作识别方法，其特征在于，应用于终端设备，所述终端设备包括惯性测量单元IMU阵列和触摸屏，所述方法包括：

通过所述触摸屏接收触控操作；

获取所述触控操作产生的触控数据，所述触控数据包括所述触摸屏产生的加速度，其中，所述加速度是由所述IMU阵列中的一个或多个与触控点相关的IMU获得的；

根据所述触控数据，识别所述触控操作的类型。

2.根据权利要求1所述的方法，其特征在于，所述触控操作的类型为以下类型中的一种：指关节触控、指甲触控、指腹触控、触控笔触控。

3.根据权利要求1或2所述的方法，其特征在于，所述相关的IMU是：

所述IMU阵列中与所述触控点物理距离最接近的一个或者多个IMU；或者，

在所述IMU阵列中每个IMU负责所述触摸屏的部分区域的情况下，所述触控点所在区域对应的IMU。

4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

获取所述触控点的位置；

根据所述触控点的位置，过滤掉所述IMU阵列中与所述触控点之间的距离大于预设距离的IMU，确定所述一个或多个相关的IMU。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述触控数据还包括以下一种或多种：所述触控操作令所述触摸屏产生的声音、所述触控操作与所述触摸屏的接触时长和所述触控操作与所述触摸屏的接触面积。

6.根据权利要求1至5任一项所述的方法，其特征在于，所述根据所述触控数据，识别所述触控操作的类型，包括：

根据所述一个或多个相关的IMU获取的加速度，获取加速度的特征，其中，当所述相关的IMU为一个时，所述加速度的特征为所述相关的IMU获取的加速度，当所述相关的IMU为多个时，所述加速度的特征为根据所述多个相关的IMU获取的加速度构建无向图，并将所述无向图输入到第一网络中进行特征提取，得到的加速度的特征向量；

将所述加速度的特征输入到第二网络，得到所述触控操作的类型。

7.根据权利要求6所述的方法，其特征在于，输入到所述第二网络的参数，还包括以下至少一项内容：所述声音的声纹频谱、所述接触时长、所述接触面积。

8.根据权利要求1至7任一项所述的方法，其特征在于，所述触摸屏为电容式触摸屏，所述触控数据还包括以下一种或多种电容屏参数：所述触控操作作用在所述触摸屏上时所述触摸屏上各点的电容值、根据所述触摸屏上各点的电容值生成的电容图像、根据所述电容图像提取的接触区域的特征，所述接触区域为所述触控操作与所述触摸屏接触的区域。

9.根据权利要求1至7任一项所述的方法，其特征在于，所述触摸屏为红外线技术触摸屏，所述触控数据还包括以下一种或多种红外屏参数：所述触控操作作用在所述触摸屏上时所述触摸屏上各点的红外线信息、根据所述触摸屏上各点的红外线信息生成的红外图像、根据所述红外图像提取的接触区域的特征。

10.根据权利要求8或9所述的方法，其特征在于，输入到所述第二网络的参数，还包括以下至少一项内容：所述电容屏参数、所述红外屏参数。

11.根据权利要求1至10任一项所述的方法，其特征在于，所述触控数据为预设时间段内的数据，所述预设时间段包括所述触控操作作用在所述触摸屏上的时刻。

12.根据权利要求6至11任一项所述的方法，其特征在于，所述第一网络为图神经网络，所述第二网络为卷积神经网络。

13.根据权利要求1至12任一项所述的方法，其特征在于，所述IMU阵列部署于所述触摸屏靠近所述终端设备背部的一侧的预设位置。