[发明专利]一种三维视频流媒体传输方法与可视化方法

权利要求书

1.一种三维视频流媒体传输方法，其特征在于，包括：

S1、基于运行Linux操作系统的单板计算机，数据采集模块采集视频传感器的原始数据，并将所述原始数据转换为媒体基本流；

S2、基于运行Linux操作系统的单板计算机，编码模块对所述媒体基本流进行压缩编码，获得编码媒体基本流；

S3、基于部署于Linux操作系统中的web服务器Nginx，通过网络传输协议RTMP将编码媒体基本流发送至客户终端；和/或，基于部署于Linux操作系统中的流媒体服务器rtsp-simple-server，通过网络传输协议RTSP将编码媒体基本流发送至客户终端；

S1中，所述将原始数据转换为媒体基本流，包括：按帧分离原始数据，并将原始帧数据与对应的帧属性描述数据一起放入先入先出帧缓冲队列；

S2中，所述编码模块对媒体基本流进行压缩编码，包括：编码模块循环从先入先出帧缓冲队列中取出帧属性描述数据，将所述帧属性描述数据编码为JSON格式，送入字幕轨道，以字幕形式同步传输。

2.根据权利要求1所述的方法，其特征在于，所述视频传感器包括普通监控摄像头、全景相机和深度相机。

3.根据权利要求1所述的方法，其特征在于，S1中，

数据采集模块通过通用驱动程序video4linux采集uvc视频传感器的原始数据，所述uvc视频传感器为数据传输遵循usb video class协议的视频传感器；

数据采集模块通过专用驱动程序采集Intel realsense系列D435i深度传感器。

4.根据权利要求1所述的方法，其特征在于，S2中，所述编码模块对媒体基本流进行压缩编码，包括：

编码模块循环从先入先出帧缓冲队列中取出原始帧数据，逐帧送入基于开源计算机程序FFmpeg的编码和封装处理管线进行压缩编码。

5.根据权利要求1所述的方法，其特征在于，所述将帧属性描述数据编码为JSON格式，包括：

对于二进制形式的帧属性描述数据，通过base64编码器将帧属性描述数据编码为ASCII字符串，再将ASCII字符串编码为JSON格式。

6.根据权利要求1所述的方法，其特征在于，数据采集模块和编码模块互相异步传输。

7.一种三维视频流媒体可视化方法，其特征在于，包括：

A1、客户终端接收根据权利要求1至6任一项所述方法传输的编码媒体基本流，并将所述编码媒体基本流解码为位图序列；

A2、基于GPU，根据所述位图序列，采用位移贴图方法，逐像素进行处理，恢复贴图对象的像素点在三维空间中的真实位置，并增强可视化效果，获得初步可视化结果；对初步可视化结果进行纹理纠正，获得最终可视化结果并输出至用户屏幕。

8.根据权利要求7所述的方法，其特征在于，A1中，所述将编码媒体基本流解码为位图序列，包括：

基于Unity平台，通过C语言中间件调用开源计算机程序FFmpeg，将编码媒体基本流解码为位图序列。