[发明专利]基于平板电脑的手术导航和增强现实系统

说明书

技术领域

本发明属医疗器械领域，涉及手术导航和增强现实技术，具体涉及基于平板电脑的手术导航和增强现实系统，适用于各类神经外科手术导航和现实增强。

背景技术

手术导航技术起源于临床神经外科，通常是在术前采集到病人的CT或者MRI图像，并将其转存到图像工作站中，形成导航参考图像。当术中带有示踪器的手术器械作用于病人时，空间定位仪跟踪到手术器械在病人坐标中的位置，将其转换到图像坐标系中，与导航参考图像叠加在一起，就如同实时透视一样，因此这种方式也称为“虚拟透视”。术中，医生借助于导航系统可以看到手术器械在病人体内的位置，从而能够正确指导医生在选定的部位上进行手术操作。现有的手术导航系统为手术操作提供了一定的便利，但是医生为了实时观察手术器械相对于病人的位置，视线需要在病人手术部位和导航仪之间来回切换，从而不利于医生集中于病人身体进行手术的过程。另外，目前导航系统所显示的内容都是虚拟的病人图像和手术器械，不能实现将实时手术中的病人联系起来。

基于移动平台的手术设备可以将术前的数据和实时手术中的病人同时置于医生的视线之中，使得医生操作更方便。目前由德国BrainLab公司研制的，基于平板电脑iPod可移动的医疗设备在股骨头置换手术中得到应用，但由于它仅针对此类手术设计的，因此应用面较窄，另外，该设备不能够真正实现病人图像和术前数据的完全融合。

发明内容

本发明的目的是提供一种操作方便，手术安全，能够实现实时手术中的病人图像和术前数据的完全融合的基于平板电脑的手术导航和增强现实系统。

本发明手术导航和增强现实系统是这样实现的，采用置有用于红外跟踪的参考架，屏幕不低于800X600的分辨率，支持多点触控及手写输入，支持Wi-Fi无线连接方式，不低于8小时的电力续航时间的平板电脑和改进的手术导航系统excelim-04或者由主计算机、红外定位仪及相关周边设备组成的更高版本的导航仪构成。

本发明中，主计算机借助红外定位仪和参考架进行光学跟踪来保证虚拟空间和实际空间的配准。

本发明中，导航仪与平板电脑通过Wi-Fi无线连接实时通信，将导航仪的数据发送到平板电脑上，同时对平板电脑拍摄的实时手术视频图像进行虚拟图像和实时手术图像叠加并显示在平板电脑的屏幕上。

本发明中，根据图像提取特征点,建立特征点之间的匹配关系，根据图像上对应的特征点分别为u_i(x_i,y_i)，u_i′(x_i′,y_i’)，则有关系或表示为V^TF＝0，其中：

F＝[F₁₁,F₁₂,F₁₃,F₂₁,F₂₂,F₂₃,F₃₁,F₃₂,F₃₃]，

V＝[x_i′x_i,x_i′y_i,x_i′ζ,y_i′x_i,y_i′y_i,y_i′ζ,x_iζ,y_iζ,ζ²]，

由此通过至少7个匹配点关系即可求得基础矩阵F；再利用对极几何原理得到图像分别的投影矩阵P和P'，P＝[I|0]，计算e'以满足对极限制e^TF＝0，得到场景的三维重建mine_u(u,PU)²+e_u(u',P'U)²，再利用红外定位仪获取场景在平板电脑参考架中的变换关系T_rm，参考架坐标到平板电脑显示屏的变换关系T_rc＝T_rm*P′。

本发明中，所述平板电脑自带的摄像头将术前拍摄的病人图像用以场景的三维重建。

本发明中，手术过程中拍摄病人的实时视频，并且由红外定位仪实时跟踪手术探针的空间位置，根据T_rc计算出探针在视频图像上的位置，并且将病人的术前数据图像叠加在视频中病人的相应位置上，实现医学增强现实效果。

本发明具有下述优点：