[发明专利]一种点读数据的制作方法、系统、存储介质及电子设备

权利要求书

1.一种点读数据的制作方法，其特征在于，包括：

获取待制作的书本资源；

识别并勾勒出所述书本资源中的文本区、图片区，确定所述书本资源的文本点读区、及图片点读区；

识别所述文本点读区的文字信息；

根据所述文字信息，生成对应的文本点读语音文件；

获得所述图片点读区的语音文件，并与所述图片点读区进行匹配；

基于所述书本资源的所有文本区及对应的文本点读语音文件、以及所有图片点读区及对应的图片点读语音文件，生成所述书本资源的点读数据。

2.根据权利要求1所述的一种点读数据的制作方法，其特征在于，所述识别并勾勒出所述书本资源中的文本区、图片区，确定所述书本资源的文本点读区、及图片点读区具体包括：

利用训练好的神经网络识别模型将所述书本资源上的每一页进行识别勾勒；所述勾勒的区域包括图像区，文本区；

基于所述分割后的图像区及文本区进行优化勾勒处理；

对优化勾勒后的图像区、文本区进行筛选处理，去除无需点读的文本区和图片区，获得所述书本资源的文本点读区、及图片点读区。

3.根据权利要求1所述的一种点读数据的制作方法，其特征在于，在识别所述文本点读区的文字信息之后还包括：

翻译所述文字信息，获得所述文字信息的双语版本；

所述根据所述文字信息，生成对应的文本点读语音文件具体包括：

根据所述文字信息的双语版本，生成对应的文本双语点读语音文件。

4.根据权利要求1-3任一项所述的一种点读数据的制作方法，其特征在于，在根据所述文字信息，生成对应的文本点读语音文件之前还包括：

对识别出的文字信息进行语义分析，获取所述文字信息的语义；

基于所述文字信息的语义，对所述文字信息进行纠错处理。

5.一种点读数据的制作系统，其特征在于，包括：

资源导入模块，用于获取待制作的书本资源；

识别勾勒模块，用于识别并勾勒出所述书本资源中的文本区、图片区，确定所述书本资源的文本点读区、及图片点读区；

文字识别模块，用于识别所述文本点读区的文字信息；

文字语音生成模块，用于根据所述文字信息，生成对应的文本点读语音文件；

图片语音处理模块，用于获得所述图片点读区的语音文件，并与所述图片点读区进行匹配；

点读数据制作模块，用于基于所述书本资源的所有文本区及对应的文本点读语音文件、以及所有图片点读区及对应的图片点读语音文件，生成所述书本资源的点读数据。

6.根据权利要求5所述的一种点读数据的制作系统，其特征在于，所述识别勾勒模块包括：

识别勾勒子模块，用于利用训练好的神经网络识别模型将所述书本资源上的每一页进行识别勾勒；所述勾勒的区域包括图像区，文本区；

优化勾勒子模块，用于基于所述分割后的图像区及文本区进行优化勾勒处理；

筛选处理子模块，用于对优化勾勒后的图像区、文本区进行筛选处理，去除无需点读的文本区和图片区，获得所述书本资源的文本点读区、及图片点读区。

7.根据权利要求5所述的一种点读数据的制作系统，其特征在于，还包括：

翻译模块，用于翻译所述文字信息，获得所述文字信息的双语版本，以便所述文字语音生成模块根据所述文字信息的双语版本，生成对应的文本双语点读语音文件。

8.根据权利要求5-7任一项所述的一种点读数据的制作系统，其特征在于，还包括：

语义理解模块，用于对所述文字识别模块识别出的文字信息进行语义分析，获取所述文字信息的语义；

纠错处理模块，用于基于所述文字信息的语义，对所述文字信息进行纠错处理。

9.一种存储介质，其特征在于，所述存储介质存储有多条指令，所述多条指令被一个或者多个处理器执行，以实现权利要求1-4中任一项所述的点读数据的制作方法的步骤。

10.一种电子设备，其特征在于，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

获取待制作的书本资源；

识别并勾勒出所述书本资源中的文本区、图片区，确定所述书本资源的文本点读区、及图片点读区；

识别所述文本点读区的文字信息；

根据所述文字信息，生成对应的文本点读语音文件；

获得所述图片点读区的语音文件，并与所述图片点读区进行匹配；

基于所述书本资源的所有文本区及对应的文本点读语音文件、以及所有图片点读区及对应的图片点读语音文件，生成所述书本资源的点读数据。