[发明专利]基于VR的交互系统、方法、存储介质、设备及终端

权利要求书

1.一种基于VR的交互系统，其特征在于，所述基于VR的交互系统包括：

智能终端，用于进行相关数据的显示；

带教模块，用于利用VR眼镜显示手术教学视频；

健康宣教模块，用于利用VR眼镜进行术前访视以及术后健康宣讲，同时用于利用VR眼镜进行手术过程图像数据的显示；

图像获取模块，用于利用摄像设备采集手术过程的图像数据；

通信模块，用于利用5G网络进行数据的传输与通信。

2.如权利要求1所述基于VR的交互系统，其特征在于，所述摄像设备为360°的摄像设备，所述摄像设备设置于手术室中。

3.如权利要求1所述基于VR的交互系统，其特征在于，所述基于VR的交互系统还包括：

数据预处理模块，用于通过数据预处理程序对获取的手术过程的图像数据进行增强去噪的预处理操作；

中央控制模块，与智能终端、带教模块、健康宣教模块、图像获取模块、数据预处理模块、数据分析模块、通信模块、数据存储模块连接，用于通过中央处理器协调控制所述基于VR的交互系统各个模块的正常运行；

数据分析模块，用于通过数据分析程序对预处理后的手术过程的图像数据进行分析处理，获得数据分析结果；

数据存储模块，用于通过云数据库服务器存储手术教学视频、手术过程的图像数据、数据预处理结果以及数据分析结果的实时数据。

4.一种应用如权利要求1～3任意一项所述基于VR的交互系统的基于VR的交互方法，其特征在于，所述基于VR的交互方法包括以下步骤：

步骤一，利用VR眼镜显示手术教学视频，并进行术前访视以及术后健康宣讲，同时用于利用VR眼镜进行手术过程图像数据的显示；

步骤二，利用设置于手术室的360°摄像设备采集手术过程的图像数据，并通过数据预处理程序对获取的手术过程的图像数据进行增强去噪的预处理；

步骤三，利用摄像设备采集手术过程的图像数据，并通过数据分析模块利用数据分析程序对预处理后的手术过程的图像数据进行分析处理；

步骤四，通过云数据库服务器存储手术教学视频、手术过程的图像数据、数据预处理结果以及数据分析结果的实时数据；

步骤五，利用5G网络将采集的手术过程的图像数据传输至对应VR眼镜中，并利用VR眼镜进行显示。

5.如权利要求4所述基于VR的交互方法，其特征在于，所述步骤二中的过数据预处理程序对获取的手术过程的图像数据进行增强去噪的预处理包括：

获取待去噪的手术过程的图像数据；

计算待去噪的手术过程的图像区域的像素值和重建预测残差值；

采用卷积神经网络模型，将所述图像区域的像素值和重建预测残差值输入至卷积神经网络模型中进行图像数据进行增强去噪处理。

6.如权利要求5所述基于VR的交互方法，其特征在于，所述待去噪的手术过程的图像区域的重建预测残差值的计算公式为：

其中，为待去噪的手术过程的图像区域的重建预测残差值，H_p,q是用于图像目标块估计的分量块，w_p,q是对应分量块的权重系数，k,p为图像块的帧索引，k对应于同图像组内的非关键帧，p对应于同图像组内的关键帧和非关键帧。

7.如权利要求4所述基于VR的交互方法，其特征在于，所述步骤五中的利用5G网络将采集的手术过程的图像数据传输至对应VR眼镜中包括：

获取数据传输指令；

根据所述数据传输指令确定待传输的手术过程的图像数据，所述待传输手术过程的图像数据包括事件信息及事件的时间校验标记；

判断所述事件的时间校验标记是否为未校验；若是，则对所述事件的产生时间进行校验和数据更新，并将所述更新后的待传输数据传输至VR眼镜。