[发明专利]AR设备及其文字识别方法、装置和计算机可读存储介质

说明书

本发明公开了一种AR设备的文字识别方法，包括：AR设备获取文字识别指令；其中，文字识别指令包括目标信息；在AR设备的摄像头采集的图像中检测目标信息对应的目标区域图像；对目标区域图像进行文本检测和识别，获取识别文本信息；本发明通过在AR设备的摄像头采集的图像中检测目标信息对应的目标区域图像，便捷准确地检测AR设备视野中用户需要进行文字识别的目标区域的图像；通过对目标区域图像进行文本检测和识别，获取识别文本信息，实现符合用户需求的文字识别，从而能够标注显示用户需求识别的识别文本信息，提升了用户体验。此外，本发明还公开了一种AR设备的文字识别装置、AR设备及计算机可读存储介质，同样具备上述有益效果。

技术领域

本发明涉及增强现实技术领域，特别涉及一种AR设备的文字识别方法、装置、AR设备及计算机可读存储介质。

背景技术

随着现代社会科技的发展，AR(Augmented Reality，增强现实)技术的应用逐渐普及与推广。虽然传统的二维图像OCR(Optical Character Recognition，光学字符识别)任务已经被大量研究，且形成了整套的理论体系和各式各样的方法，但是传统的OCR任务是对预设或手动设置的文字区域进行文字的检测和识别，如通过CTPN(Connectionist TextProposal Network)和EAST(An Efficient and Accurate Scene Text Detector)等基于深度学习的文字检测算法先将文字检测出来，并使用CRNN(卷积循环神经网络)和DenseNet(密集卷积网络)+CTC(Connectionist Temporal Classifier，联接时间分类器)等算法进行识别。

现有技术中，AR设备(如AR眼镜)的使用过程中，无法便捷的检测用户需要进行文字识别的区域，难以实现符合用户需求的文字识别，不利于用户体验。因此，如何能够使AR设备能够便捷准确的检测到用户需要进行文字识别的区域，实现符合用户需求的文字识别，提升用户体验，是现今急需解决的问题。

发明内容

本发明的目的是提供一种AR设备的文字识别方法、装置、AR设备及计算机可读存储介质，以使AR设备能够便捷准确的检测到用户需要进行文字识别的区域，实现符合用户需求的文字识别，提升用户体验。

为解决上述技术问题，本发明提供一种AR设备的文字识别方法，包括：

AR设备获取文字识别指令；其中，所述文字识别指令包括目标信息；

在所述AR设备的摄像头采集的图像中检测所述目标信息对应的目标区域图像；

对所述目标区域图像进行文本检测和识别，获取识别文本信息。

可选的，所述AR设备获取文字识别指令，包括：

对AR设备的麦克风采集到的语音信息进行语音识别，获取所述文字识别指令。

可选的，所述在所述AR设备的摄像头采集的图像中检测所述目标信息对应的目标区域图像，包括：

利用目标检测算法，识别所述图像中的所述目标信息对应的目标区域图像。

可选的，所述对所述目标区域图像进行文本检测和识别，获取识别文本信息，包括：

利用所述AR设备的显示器，在所述目标区域图像对应的显示区域按预设显示方式显示所述识别文本信息。

可选的，所述预设显示方式包括：增强显示和/或翻译显示。

本发明还提供了一种AR设备的文字识别装置，包括：

获取模块，用于获取文字识别指令；其中，所述文字识别指令包括目标信息；

检测模块，用于在AR设备的摄像头采集的图像中检测所述目标信息对应的目标区域图像；