[发明专利]远程手术数据融合交互显示系统及方法

摘要

本发明提供远程手术数据融合交互显示系统及方法，包括：术前采集与处理模块、深度相机场景采集模块、多模态数据集成与裸眼三维融合显示模块、数据通信模块、多维交互控制与反馈模块和手术器械操作与传感模块；所述方法包括多种模态数据集成、实时影像信息融合与三维显示和多维交互控制与反馈。本发明利用动态不透明度融合算法将远程手术术前与术中多模态数据充分融合，并通过三维卷绕与孔洞填充实时生成术中三维显示多视点图像，实现了多模信息实时裸眼三维显示和自然的远程交互控制，可应用于远程手术或医学教学场景，使得相关应用实时性好、延时低、信息丰富、操作准确和便捷，进而降低手术难度和提升手术成功率。