[发明专利]基于AR眼镜的无人机操控系统及方法

说明书

本发明提供一种基于AR眼镜的无人机操控系统及方法，其中，该系统包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。通过头动、语音控制和手势操作的多种交互方式实现了AR眼镜操控无人机的飞行和拍摄，便于无人机全方位无死角巡检和更加便捷舒适地通过人机交互方式操作无人机。

技术领域

本发明涉及AR技术以及无人机远程操控领域，尤其涉及一种基于AR眼镜的无人机操控系统及方法。

背景技术

AR眼镜与无人机相在联合巡检时，AR眼镜是作为外接的观看模块，通过无线投屏或连接线接入无人机，获取视频画面。而AR眼镜仅作为外接观看的显示设备，缺少与无人机的操控交互。

发明内容

本发明提供一种基于AR眼镜的无人机操控系统及方法。

第一方面，本发明提供了一种基于AR眼镜的无人机操控系统，包括：头动操控模块，用于根据用户头部的旋转角度控制无人机摄像头的转动角度；语音操控模块，用于接收用户输入的语音，并根据预设的关键词唤醒和操控无人机；手势操控模块，用于捕捉到用户的手势和手指的坐标以触发相应的功能。

进一步地，所述头动操控模块还用于获取至少一个自由度的旋转角度，并将关于所述至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述至少一个自由度的旋转角度转动。

进一步地，所述头动操控模块还用于根据AR眼镜内部的陀螺仪获取至少一个自由度的旋转角度，并调取已设定好的转动角度对照表，根据所述对照表和陀螺仪获取的至少一个自由度的旋转角度确定对应无人机的至少一个自由度的旋转角度，将关于所述对应无人机的至少一个自由度的旋转角度的控制信号发送至无人机，以控制无人机摄像头根据所述控制信号转动至少一个自由度的旋转角度。

进一步地，所述头动操控模块还用于根据无人机能够转动的最大角度控制无人机摄像头的转动角度。

进一步地，语音操控模块还用于根据预设的唤醒词唤醒无人机，根据预设的指令词操控无人机。

进一步地，语音操控模块还用于根据预设的指令词操控无人机的飞行状态，以及操控无人机的摄像头。

进一步地，所述功能包括无人机镜头对焦、在AR眼镜的视野中标记重点区域和控制无人机拍摄画面的功能。

进一步地，所述系统还包括：存储模块，用于将语音操控模块接收的语音转换为文字并记录下来，以及用于绑定存储对应所述文字的无人机拍摄的画面。

第二方面，本发明还提供了一种基于AR眼镜的无人机操控方法，包括：响应于获取用户头部的旋转角度和/或用户输入的语音和/或用户的手势和手指的坐标，将相应的控制信号发送至无人机，以控制无人机摄像头的转动角度和/或唤醒和操控无人机和/或触发其他功能。

第三方面，本发明还提供了一种基于AR眼镜的无人机操控装置，包括第一处理模块，用于：响应于获取用户头部的旋转角度和/或用户输入的语音和/或用户的手势和手指的坐标，将相应的控制信号发送至无人机，以控制无人机摄像头的转动角度和/或唤醒和操控无人机和/或触发其他功能。

第四方面，本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述的基于AR眼镜的无人机操控方法的步骤。

第五方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述的基于AR眼镜的无人机操控方法的步骤。