[发明专利]文件处理方法及装置、电子设备

权利要求书

1.一种文件处理方法，包括：

采集第一音频，对所述第一音频进行语音识别，得到第一识别结果；其中，所述第一音频与第一文本相关联；以及

采集第一图像，对所述第一图像进行文本识别，得到第二识别结果；其中，所述第一图像中包含所述第一文本基于第一应用启动的呈现界面；

将所述第一识别结果与所述第二识别结果进行匹配，得到匹配结果；

基于所述匹配结果对所述第一文本中的匹配内容进行标识。

2.根据权利要求1所述的方法，所述对所述第一图像进行文本识别，得到第二识别结果，包括：

获取所述第一图像中的所述第一文本的呈现界面，识别出所述呈现界面中的文本块；

识别所述文本块中的文字，作为所述第二识别结果。

3.根据权利要求2所述的方法，所述将所述第一识别结果与所述第二识别结果进行匹配，得到匹配结果，包括：

获取所述第一识别结果中的第一文字内容，将所述第一文字内容分别与所述文本块的识别文字进行文本和/或语义文本匹配；

查找出与所述第一文字内容的文本和/或语义匹配度最高的文本块识别文字，作为匹配结果。

4.根据权利要求3所述的方法，所述基于所述匹配结果对所述第二识别结果中的识别内容进行标识，包括：

调整与所述第一文字内容的文本和/或语义匹配度最高的文本块识别文字所在区域的显示属性，以区别于其他文本块识别文字。

5.根据权利要求3所述的方法，所述方法还包括：

识别所述第一文字内容中的关键词，基于本地的知识图谱库获取所述关键词的领域相关词，将所述领域相关词作为热词表；

基于所述热词表在热词模型网络进行训练，基于所述热词模型网络对所述第一文字内容进行修正。

6.根据权利要求3所述的方法，所述方法还包括：

识别所述第一文字内容中的关键词，基于所述关键词进行知识图谱扩充，获取所述关键词的领域相关词，得到扩充数据；

基于所述扩充数据在设定的优化模型进行词汇训练，对所述第一文字内容进行修正。

7.根据权利要求5或6所述的方法，所述方法还包括：

基于修正后的所述第一文字内容，以及所述关键词的领域相关词，分别与所述文本块的识别文字进行文本和/或语义文本匹配，再次确定与所述第一文字内容的文本和/或语义匹配度最高的文本块识别文字；

如果再次确定的文本块识别文字与之前标识的文本块识别文字不同，取消对所述之前标识的文本块的标识。

8.根据权利要求1所述的方法，所述采集第一音频，对所述第一音频进行语音识别，得到第一识别结果，包括：

确定所述第一文本中的关键词，基于知识图谱库获取所述关键词的领域相关词，将所述领域相关词作为热词表；

基于所述热词表对热词模型网络进行训练，基于所述热词模型网络对采集的第一音频进行语音识别，得到第一识别结果。

9.根据权利要求1所述的方法，所述采集第一音频，对所述第一音频进行语音识别，得到第一识别结果，包括：

确定所述第二识别结果中的关键词，基于知识图谱库获取所述关键词的领域相关词，将所述领域相关词作为热词表；

基于所述热词表对热词模型网络进行训练，基于所述热词模型网络对采集的第一音频进行语音识别，得到第一识别结果。

10.一种文件处理装置，包括：

第一识别单元，用于采集第一音频，对所述第一音频进行语音识别，得到

第一识别结果；其中，所述第一音频与第一文本相关联；

第二识别单元，用于采集第一图像，对所述第一图像进行文本识别，得到第二识别结果；其中，所述第一图像中包含所述第一文本基于第一应用启动的呈现界面；

匹配单元，用于将所述第一识别结果与所述第二识别结果进行匹配，得到匹配结果；

标识单元，用于基于所述匹配结果对所述第一文本中的匹配内容进行标识。