[发明专利]一种手术综合视景智能辅助系统及图像处理方法

权利要求书

1.一种手术综合视景智能辅助系统，其特征在于，其包含：

眼镜，其具有镜框和两镜腿；

设置于镜框前的VR/AR显示屏；

设置于镜框上的两个红外光源，用于辅助光学跟踪视频摄像头测距；

分别设置在两镜腿上的两个光学跟踪视频摄像头，用于接收术区标记点反射信号以跟踪术区标记点获取相对位置信息，及，用于拍摄使用者视线范围内图像，获得视频拍摄图像，该视频拍摄图像用于后续图像融合；

数据接收处理装置，包含用于接收外界信息的数据接收端口，语音指令处理组件，及，图像处理组件；

设在镜腿末端的微型麦克风，用于收集语音指令；及

供电元件，用于提供电源。

2.如权利要求1所述的手术综合视景智能辅助系统，其特征在于，所述的数据接收处理装置通过无线传输或有线传输接收外界信息。

3.如权利要求1所述的手术综合视景智能辅助系统，其特征在于，该系统还包含：至少一个位置传感器，用于协助监测眼镜方位变换。

4.如权利要求3所述的手术综合视景智能辅助系统，其特征在于，所述的位置传感器包含陀螺仪传感器。

5.如权利要求3所述的手术综合视景智能辅助系统，其特征在于，所述的位置传感器设在所述的镜腿上。

6.如权利要求1所述的手术综合视景智能辅助系统，其特征在于，所述的外界信息包括但不限于原始影像数据三维重建结果，内镜成像内容，显微镜成像内容，病人病历信息、检查结果，基本生命体征监测值。

7.如权利要求1所述的手术综合视景智能辅助系统，其特征在于，所述的语音指令处理组件已预先设定可识别的语音指令内容，用于对收集的语音指令的识别与反馈。

8.如权利要求1所述的手术综合视景智能辅助系统，其特征在于，所述的图像处理组件用于图像处理，包括数据导入单元、图像融合单元。

9.如权利要求8所述的手术综合视景智能辅助系统，其特征在于，所述的图像融合单元用于图像配准，以及图像融合，所述的图像融合是指根据相对位置关系对摄像图像及影像数据配准后的图像进行虚实融合。

10.一种根据权利要求1所述的手术综合视景智能辅助系统的图像处理组件进行图像处理的方法，其特征在于，该方法包含：

将二维影像数据三维重建，获取原始影像数据；

对原始影像数据与病人位姿进行配准，获得配准后的术前影像数据；

通过光学跟踪视频摄像头获取摄像图像数据；

红外光源发射红外光，光学跟踪视频摄像头探测术区标记点反射的信号，获取眼镜与术区标记点的相对位置关系；

将配准后图像进行虚实融合，获得虚实融合图像，该融合图像输出至显示屏。