[发明专利]全景显示系统在AR眼镜上的实时传输与监控的方法

权利要求书

1.一种全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，包括：

步骤1、安装摄像头；

步骤2、进行全景画面实时拼接和unity多形状动态贴图；

步骤3、对场景对象进行渲染；

步骤4、UDP/RTSP全景画面传输；

步骤5、实现头部姿态、眼动、语音和手势控制视角画面；

步骤6、最终设备间同步显示全景实时画面并协同控制。

2.根据权利要求1所述的全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，步骤1包括：在设备上安装多路摄像头，并将其布置在设备上对应的位置，利用实时拼接及融合算法完成基本的全景画面显示；其中，摄像头的安装方式设定为弧形式排列或者散列式排列，并且，多路摄像头为4路、8路、16路或32路。

3.根据权利要求1所述的全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，步骤2包括：通过unity3d软件接入步骤1中安装好的实时全景显示画面，在接入全景显示画面时，显示对象能够兼容多个模型作为贴图对象；将这些多模型类型的中心点作为视野的中心点，并给这多个模型的对象赋予全景Shader；其中，多个模型包括正方体、球体、圆柱体以及胶囊体。

4.根据权利要求1所述的全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，步骤3包括：在球谐光照技术的基础上对场景对象进行渲染，将动态视频贴在球体上，用于解决带宽传输及图像渲染的问题。

5.根据权利要求1所述的全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，步骤4包括：初始化位置坐标，通过UDP方式将实时的全景画面传输到AR眼镜端，若传输的视频帧过大，则对其进行压缩处理，用于提高传输速度。

6.根据权利要求1所述的全景显示系统在AR眼镜上的实时传输与监控的方法，其特征在于，步骤5包括：通过AR眼镜端的陀螺仪实现全方位全景画面端随头部姿态移动，若头部向左，则画面跟随头部向左移动，若头部向右，则画面跟随头部向右移动，用于解决视野盲区。