[发明专利]一种基于无人机全景视频的虚拟现实直播系统

说明书

本发明适用于无人机领域，提供一种基于无人机全景视频的虚拟现实直播系统，包括无人机、移动控制终端、VR直播云服务器、沉浸式可视设备、VR处理器、全景视频相机；优选方案中，还包括用于佩戴在用户各部位的各种可穿戴智能传感器。本发明有三种体验方式实现无人机全景视频的VR直播，特别的，通过可穿戴智能传感器感受用户身体的运动趋势，将其转换成相应的无人机飞行控制指令，通过VR直播云服务器转发到移动控制终端，移动控制终端将控制指令发送到无人机，无人机接收到控制指令后同步实现其飞行动作，并将其全景视频相机抓取的全景视频中，嵌入虚拟的操作用户,然后反向实时传递到用户的沉浸式可视设备，达到VR互动直播的效果。

技术领域

本发明属于无人机领域，尤其涉及一种基于无人机全景视频的虚拟现实直播系统。

背景技术

VR（Virtual Reality，即虚拟现实，简称VR）技术是采用以计算机技术为核心的现代高科技手段生成逼真的视觉、听觉、触觉、嗅觉、味觉等一体化的虚拟环境，用户从自己的视点出发，借助特殊的输入输出设备，采用自然的方式与虚拟世界的物体进行交互，相互影响。传统的无人机是通过遥控器及手机软件对无人机飞行进行一定操作，遥控操作与传统的遥控玩具飞机无太大差异，可玩性不强，无新颖性。

发明内容

鉴于上述问题，本发明的目的在于提供一种基于无人机全景视频的虚拟现实直播系统，该系统能够为用户提供一种便利性、交互性、真实性极强的虚拟现实飞行体验，如同普通的电视直播一样观看无人机全景视频并进行VR交互体验。

本发明采用如下技术方案：

所述基于无人机全景视频的虚拟现实直播系统包括无人机、移动控制终端、VR直播云服务器、沉浸式可视设备，所述无人机内设置有VR处理器，并且无人机搭载有全景视频相机，所述无人机与移动控制端采用无线数据连接，所述VR直播云服务器与移动控制终端、可视设备采用互联网或者虚拟专用网方式连接，其中，

所述全景视频相机包含双目或多目摄像头，用于采集现场360°全景视频，保证视场的全方位覆盖，能够提供立体三维建模所需要的全部信息；

所述VR处理器作为VR图像处理中心，接收所述360°全景视频以及全景视频相机参数，确定场景内各目标的相关信息，最终生成三维全景视频，所述相关信息包括场景内各目标的空间位置、距离、大小、方位、速度；

所述移动控制终端用于将从无人机的VR处理器回传的三维全景视频实时上传到VR直播云服务器；

所述VR直播云服务器用于高速缓存一套或多套无人机对应的移动控制终端传输过来的三维全景视频，根据直播用户需求进行实时转播；

所述沉浸式可视设备具有内部图形处理器及控制器，用于实时接收VR直播云服务器转播的三维全景视频，并快速处理视频图像还原真实的3D场景，实时展示。

进一步的，所述VR直播云服务器还用于根据直播用户需求配置离线缓存后进行用户体验转播；所述沉浸式可视设备还用于从VR直播云服务器中下载用户选择的三维全景视频离线缓存实现全景体验或模拟VR飞行。

进一步的，所述系统还包括用于佩戴在用户各部位的各种可穿戴智能传感器，所述可穿戴智能传感器用于捕捉人体动作运动趋势，并实时转换为控制指令，通过VR直播云服务器、移动控制终端发送至前端的无人机，无人机更新控制信息和飞行状态；所述VR处理器还用于将根据无人机最新状态虚拟出现实模型，模拟出操控者和无人机人机一体的个体模型，并将所述个体模型插入到所述三维全景视频中，得到完整的VR场景。