[发明专利]一种指读对象的识别方法及学习机

权利要求书

1.一种指读对象的识别方法，其特征在于，所述方法包括：

获取环境图像；

对所述环境图像进行页面提取，得到所述环境图像中的页面图像；

根据所述页面图像与预设的资料数据库，确定与所述页面图像对应的候选信息；以及，

将所述页面图像输入到预设的指读识别模型中，并通过所述指读识别模型对所述页面图像进行工具识别，得到所述页面图像对应的指示区域；

根据所述指示区域对应的区域坐标，确定所述指示区域对应的指示坐标；

根据所述指示坐标，确定所述候选信息中与所述指示区域对应的目标信息，并将所述目标信息发送至预先连接的输出装置，以供所述输出装置输出所述目标信息。

2.根据权利要求1所述指读对象的识别方法，其特征在于，所述根据所述页面图像与预设的资料数据库，确定与所述页面图像对应的候选信息包括：

根据预设的信息提取算法，提取所述页面图像对应的识别页面信息；

根据所述识别页面信息，确定预设的资料数据库中与所述识别页面信息对应的目标书本；

根据所述目标书本，确定与所述识别页面信息对应的候选信息。

3.根据权利要求2所述指读对象的识别方法，其特征在于，所述识别页面信息包括若干个识别区域坐标，以及所述识别区域坐标对应的区域特征；所述根据所述识别页面信息，确定预设的资料数据库中与所述识别页面信息对应的目标书本包括：

根据所述区域特征，确定所述资料数据库中与所述识别页面信息对应的候选页面；

根据所述识别区域坐标，确定所述候选页面对应的目标页面；

将所述目标页面对应的录入书本作为所述目标书本。

4.根据权利要求1所述指读对象的识别方法，其特征在于，所述将所述页面图像输入到预设的指读识别模型中，并通过所述指读识别模型对所述页面图像进行工具识别，得到所述页面对象对应的指示区域之前，还包括：

收集若干张训练图像，并对所述训练图像进行标注，得到标注信息，其中，所述标注信息为所述训练图像中指示工具的区域坐标；

针对每一个训练图像，将该训练图像输入到预设的初始模型中，并控制所述初始模型计算该训练图像对应的预测标注；

基于预设的损失函数，计算所述预测标注以及该训练图像对应的标注信息之间的损失值；

根据所述损失值，调整所述初始模型的参数，直至所述初始模型收敛，得到指读识别模型。

5.根据权利要求1所述指读对象的识别方法，其特征在于，所述根据所述指示区域对应的区域坐标，确定所述指读区域对应的指示坐标包括：

根据预设的皮肤像素值，对所述页面图像进行二值化，得到轮廓图像；

根据所述轮廓图像的质心，确定所述轮廓图像中与所述质心最远的像素点为指尖点；

根据所述指尖点，确定所述指读区域对应的指示坐标。

6.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1～5任意一项所述的指读对象的识别方法中的步骤。

7.一种学习机，其特征在于，所述学习机包括摄像头、输出装置以及执行如权利要求1～5中任意一项所述的指读方法的中心处理器；

所述摄像头、所述输出装置分别与所述中心处理器通讯连接；

所述摄像头用于对环境进行图像采集，得到环境图像并发送至所述中心处理器；

所述输出装置用于接收所述中心处理器的输出数据，并将所述输出数据输出。

8.根据权利要求7所述的学习机，其特征在于，所述输出数据包括语音数据以及图像数据；

所述输出装置包括用于显示所述图像数据的显示模块，以及播放所述语音数据的语音模块。

9.根据权利要求7所述的学习机，其特征在于，所述显示模块包括短距离投影仪以及投影屏。

10.根据权利要求9所述的学习机，所述投影屏为触控屏。