[发明专利]基于增强现实的视障儿童定向行走训练辅助系统的控制方法

说明书

本发明公开了基于增强现实的视障儿童定向行走训练辅助系统的控制方法，旨在设计并开发一套以智能手机为载体结合Arduino声音硬件的定向行走辅助训练系统，辅助视障儿童实现更趣味高效的定向行走训练。使用时，首先通过手机把将要训练的区域扫描并储存，随后将扫描得到的数据上传至云端；然后把相应的声音硬件悬挂或安装在不同的声源POI位置，让声音硬件在训练区域内模拟社会复杂环境的声音；最后让视障用户在AR声音沉浸式环境下体验课程，通过指引寻找不同的声音硬件完成不同的定向游戏任务，在玩耍的过程中提高视障用户空间认知能力。本发明还具有硬件结构简单、操作方便、容易实施的优点。

技术领域

本发明涉及定向行走训练技术领域，尤其涉及基于增强现实的视障儿童定向行走训练辅助系统的控制方法。

背景技术

定向行走是视障儿童一生中最重要的技能之一，是视障儿童走出家门、接受教育、实现未来就业、融入社会的重要途径。但是由于缺乏合格的训练师，只有约百分之四十的视障人士接受定向行走训练，如何设计并实现一个具有模拟训练环境和自适应学习的系统更高效、更智能的训练系统，已经成为相关领域的热点研究问题之一，而现有技术还存在以下缺陷：

(1)设备复杂，不易全面推广：上述的定向行走训练辅助技术受限于设备复杂，难以普及大部分视障群体。

(2)受限固定空间：目前虚拟现实模拟现实音源定位精度不够。

(3)体验感不强：训练的趣味性不强，训练过程比较枯燥。

发明内容

本发明的目的在于克服现有技术的不足，提供一种基于增强现实的视障儿童定向行走训练辅助系统的控制方法。

本发明的目的通过下述技术方案实现：

基于增强现实的视障儿童定向行走训练辅助系统的控制方法，该方法主要包括线上部分和线下部分，其中线上部分包括如下步骤：

步骤S1：通过稀疏空间地图技术构建三维视觉地图并上传到云端。

步骤S2：终端设备重新访问相同的空间时，只要访问已经构建的三维视觉地图就可以获得关于关于该地图的所有信息。

步骤S3：声源POI表示声源目的地，系统需要在三维视觉地图上以对象或图像为目标封装数据的形式标记声源POI，从而建立系统对场景的理解。

线下部分包括如下步骤：

步骤S4：在标记好的声源POI位置中放置相应的声音硬件。

步骤S5：需要时，通过手机连接声音硬件并定位位置，再利用导航规划出对应路径。

步骤S6：通过手机上的摄像头进行特征匹配和姿态追踪进行空间重定位。

步骤S7：输入蓝牙指令，通过激活蓝牙模块连接声音硬件。

步骤S8：声音硬件开始模拟场景音效工作以及相应的故事讲解，使得训练过程充满乐趣，视障用户便可以开始根据声音硬件的音源发声辨明声源方向进行训练。

步骤S9：视障用户输入开始训练指令，系统随即访问相应的视觉地图，实现场景的重定位，并通过特征匹配和姿态追踪可以获得实时定位。

作为本发明的优选方案，当视障用户迷失时，可以打开语音导航功能进行实时导航，纠正当前训练路线，从而达到引导视障用户进行相应的定向行走训练的目的。

作为本发明的优选方案，所述声音硬件设为Arduino声音硬件。