[发明专利]基于图片匹配实现互动提示的方法、装置及存储设备

说明书

本申请公开了一种基于图片匹配实现互动提示的方法、装置及存储设备，该方法包括：对相机采集图片进行透射变换；提取透射变换后的相机采集图片特征；对提取到的透射变换后的相机采集图片特征进行反透射变换；对反透射变换后的相机采集图片特征进行畸变矫正；根据畸变矫正后的相机采集图片特征、预先提取到的扫描图片特征和互动区域在扫描图片中的坐标进行语音提示。本申请能够取得的有益效果在于，互动区域不在视野范围给予语音提示；对反透射变换后的相机采集图片特征进行畸变矫正，计算量小，实时性高，在内存受限条件下有效的提升用户体验。

技术领域

本申请涉及人工智能技术领域，尤其是涉及一种基于图片匹配实现互动提示的方法、装置及存储设备。

背景技术

基于图像识别技术识别儿童绘本是通过检测相机捕获的图像中是否包含儿童绘本，并且根据图像特征确认当前图像是哪本绘本的哪一页，实现自动阅读儿童绘本的功能。为了更好的培养儿童绘本阅读习惯，可以通过基于图像识别的手指检测功能，实现简单的阅读互动，比如手指点读，问答交互(提问题，然后儿童用手指指出答案)。由于相机视野范围有限，使用环境变化多样，在进行交互时，存在儿童绘本中互动区域不在视野范围内的情况，导致互动失败的问题。

发明内容

本申请实施例提供一种基于图片匹配实现互动提示的方法、装置及存储设备。解决了儿童绘本中互动区域不在视野范围内的情况，导致互动失败的问题。

本申请实施例提供了一种基于图片匹配实现互动提示的方法，该方法包括：

对相机采集图片进行透射变换；

提取透射变换后的相机采集图片特征；

对提取到的透射变换后的相机采集图片特征进行反透射变换；

对反透射变换后的相机采集图片特征进行畸变矫正；

根据畸变矫正后的相机采集图片特征、预先提取到的扫描图片特征和互动区域在扫描图片中的坐标进行语音提示。

进一步地，所述提取透射变换后的相机采集图片特征包括：利用局部特征检测算法提取透射变换后的相机采集图片特征。

进一步地，所述根据畸变矫正后的相机采集图片特征、预先提取到的扫描图片特征和互动区域在扫描图片中的坐标进行语音提示包括：

根据畸变矫正后的相机采集图片特征和预先提取到的扫描图片特征得到转换矩阵；

根据所述转换矩阵和所述互动区域在扫描图片中的坐标进行语音提示。

进一步地，所述根据畸变矫正后的相机采集图片特征和预先提取到的扫描图片特征得到转换矩阵包括：将畸变矫正后的相机采集图片特征和预先提取到的扫描图片特征进行匹配得到转换矩阵。

进一步地，所述将畸变矫正后的相机采集图片特征和预先提取到的扫描图片特征进行匹配得到转换矩阵包括：利用随机抽样一致性算法计算出畸变矫正后的相机采集图片特征和预先提取到的扫描图片特征之间的转换矩阵。

进一步地，所述根据所述转换矩阵和所述互动区域在扫描图片中的坐标进行语音提示包括：

利用所述转换矩阵将所述互动区域在扫描图片中的坐标转换到在畸变矫正后的相机采集图片中的坐标；

根据转换的互动区域在畸变矫正后的相机采集图片中的坐标进行语音提示。

进一步地，所述根据转换的互动区域在畸变矫正后的相机采集图片中的坐标进行语音提示包括：在所述转换的互动区域在畸变矫正后的相机采集图片中的坐标超出所述畸变矫正后的相机采集图片的实际坐标的情况下，进行语音提示。

进一步地，所述在所述转换的互动区域在畸变矫正后的相机采集图片中的坐标超出所述畸变矫正后的相机采集图片的实际坐标的情况下，进行语音提示包括：