[发明专利]电子设备的用户交互方法、系统、电子设备及计算机介质

说明书

本公开提供了一种电子设备的用户交互方法，包括：根据用户操作确定所述电子设备的用户界面上展示的元素；获取与所述元素相关的信息，所述与所述元素相关的信息包括以下任意一项或多项：所述元素的描述信息、所述元素的功能信息、所述元素的内容信息、或所述元素在所述用户界面的位置信息；以及根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息。

技术领域

本公开涉及互联网技术领域，更具体地，涉及一种电子设备的用户交互方法、系统、电子设备及计算机介质。

背景技术

触控屏方式的普及对于视力正常的用户而言，大大化简了操作步骤，提升了手机、平板电脑、笔记本电脑等电子设备的使用体验。但是对于盲人和有视力障碍的用户，在大量取消物理实体按键之后，则让他们找不到定位感和触摸感，光是一块没有凹凸感的触控屏反而给他们实际使用带来不便。针对这种情况，现有技术的解决方案是利用一种基于手势的屏幕阅读器(苹果手机中的VoiceOver)对用户在电子设备的触摸屏展示的用户界面上的操作进行语音提示，例如，用户在用户界面上点击图片或者应用程序时，该屏幕阅读器响应用户操作，并对用户所点击的元素进行播放：“图片”或者“微信”以提示用户。

在实现本发明构思的过程中，发明人发现现有技术中至少存在如下问题：在响应用户操作，对用户界面展示的元素进行播放时，只能播放该元素的名称而没有其他信息，致使用户获得的关于其点击的元素的信息非常有限。

发明内容

有鉴于此，本公开提供了一种种电子设备的用户交互方法、系统、电子设备及计算机介质。

本公开的一个方面提供了一种电子设备的用户交互方法，包括：根据用户操作确定所述电子设备的用户界面上展示的元素；获取与所述元素相关的信息，所述与所述元素相关的信息包括以下任意一项或多项：所述元素的描述信息、所述元素的功能信息、所述元素的内容信息、或所述元素在所述用户界面的位置信息；以及根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息。

根据本公开的实施例，根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息包括：基于所述元素的描述信息和/或功能信息生成第一信息，所述第一信息包括所述元素的名称和/或对所述元素操作的结果；以及根据所述第一信息生成用于描述所述元素的第一语音信息。

根据本公开的实施例，所述与所述元素相关的信息还包括所述元素的外观信息；以及根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息包括：根据所述元素的外观信息和/或所述元素在所述用户界面的位置信息生成用于描述所述元素的第一语音信息。

根据本公开的实施例，所述元素的外观信息包括所述元素的形状和/或大小；以及根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息包括：根据所述元素的形状和/或大小、所述元素的名称、对所述元素操作的结果、所述元素的内容信息和所述元素在所述用户界面的位置信息生成用于描述所述元素的第一语音信息。

根据本公开的实施例，所述元素包括以下任意一个：应用程序、控件、图像文件、视频文件、音频文件、或文档。

本公开的另一个方面提供了一种电子设备的用户交互方法，包括：确定模块，用于根据用户操作，确定所述电子设备的用户界面上展示的元素；获取模块，用于获取与所述元素相关的信息，所述与所述元素相关的信息包括以下任意一项或多项：所述元素的描述信息、所述元素的功能信息、所述元素的内容信息、或述元素在所述用户界面的位置信息；以及生成模块，用于根据获取的与所述元素相关的信息生成用于描述所述元素的第一语音信息。

根据本公开的实施例，所述生成模块包括：第一生成模块，用于基于所述元素的描述信息和/或功能信息生成第一信息，所述第一信息包括所述元素的名称和/或对所述元素操作的结果；以及第二生成模块，用于根据所述第一信息生成用于描述所述元素的第一语音信息。