[发明专利]一种辅助阅读方法、系统及存储介质

权利要求书

1.一种辅助阅读方法，其特征在于，包括：

获取用户注视目标的图像，并对所述图像进行文字识别，获得所述图像中包含的文字；

对所述用户进行视线追踪，获得用户的注视点信息；

将所述注视点信息映射到所述图像中，获得用户当前注视的目标文字；

将所述目标文字转换为音频进行播放。

2.根据权利要求1所述的方法，其特征在于，获取用户注视目标的图像，包括：

若用户注视目标的图像通过显示装置显示，则获取所述图像的来源；

根据所述来源获取所述用户注视目标的图像；或者，

通过摄像头对显示的内容进行拍摄，获得所述用户注视目标的图像。

3.根据权利要求1所述的方法，其特征在于，获取用户注视目标的图像，包括：

若用户注视的目标是实物书籍，则通过摄像头对用户注视的实物书籍进行拍摄，获得所述用户注视目标的图像。

4.根据权利要求1所述的方法，其特征在于，将所述注视点信息映射到所述图像中，获得用户当前注视的目标文字，包括：

获取所述注视点信息在所述图像中对应的坐标信息；

基于所述坐标信息确定用户当前注视的目标文字。

5.根据权利要求1所述的方法，其特征在于，将所述目标文字转换为音频进行播放，包括：

判断用户注视所述目标文字的时长是否超过设定值，

若超过，则将所述目标文字转换为音频进行播放。

6.一种辅助阅读系统，其特征在于，包括：图像获取模块、文字识别模块、视线追踪模块、注视点信息映射模块及音频播放模块；

所述图像获取模块用于获取用户注视目标的图像；所述文字识别模块用于对所述图像进行文字识别，获得所述图像包含的文字；所述视线追踪模块用于对用户进行眼动追踪，获得用户的注视点信息；所述注视点信息映射模块用于将所述注视点信息映射到所述图像中，获得用户当前注视的目标文字；所述音频播放模块用于将所述目标文字转换为音频进行播放。

7.根据权利要求6所述的系统，其特征在于，所述系统还包括摄像头；所述摄像头用于对用户注视的内容进行拍摄，获得用户注视目标的图像，并将所述图像发送至所述图像获取模块；其中，用户注视的是实物书籍或者用户注视目标的图像通过显示装置显示。

8.根据权利要求6或7所述的系统，其特征在于，若用户注视目标的图像通过显示装置显示，则所述视线追踪模块集成于所述显示装置上；

所述图像获取模块还用于：获取所述图像的来源；根据所述来源获取用户注视目标的图像。

9.根据权利要求7所述的系统，其特征在于，所述摄像头和所述视线追踪模块集成于可穿戴设备上。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理装置执行时实现如权利要求1-5中任一所述的辅助阅读方法。