[发明专利]图像融合系统、方法、装置、设备及存储介质

权利要求书

1.一种图像融合系统，其特征在于，包括：

成像模块、红外激光模块、图像处理模块以及显示模块；

所述成像模块包括用于采集第一波段的光的多目相机以及用于采集第二波段的光的第二相机；第一相机为可见光相机，所述第二相机为红外相机，用于通过观测荧光分布得到肿瘤分布；

所述红外激光模块用于激发红外荧光造影剂；相应的，所述红外相机具体用于采集通过所述红外激光模块激发荧光造影剂在肿瘤区域形成的红外光；所述第一相机拍摄的为表层图像，所述第二相机拍摄的为皮下或皮表荧光图像；

所述多目相机包括若干第一相机，所述若干第一相机为两个或两个以上第一相机；

所述图像处理模块用于根据所述若干第一相机采集到的图像，进行三维重构，生成三维图像；对生成的三维图像以及所述第二相机采集到的图像进行融合，得到融合后的图像；

所述显示模块用于显示下述至少一项：所述三维图像、所述第二相机采集到的图像、所述融合后的图像；

其中，所述多目相机包括两个第一相机，所述两个第一相机和所述第二相机与待观测物之间的距离相等，所述两个第一相机并列排放，所述第二相机位于两个并列排放第一相机中心点连线的中垂线上；

位于一侧的第一相机与所述第二相机的中心轴间距等于另一第一相机与所述第二相机的中心轴间距；

所述显示模块还用于：

设置所述融合后的图像中荧光区域的透明度；和/或，

在所述融合后的图像中标记荧光边界轮廓。

2.根据权利要求1所述的系统，其特征在于，所述若干第一相机的视场不同，且所述若干第一相机的视场具有重叠区，所述重叠区为第一重叠区，所述第二相机的视场与所述第一重叠区具有第二重叠区，待观测物置于所述第二重叠区内。

3.根据权利要求2所述的系统，其特征在于，所述第一重叠区的中心点置于所述第二相机的光轴上。

4.根据权利要求1所述的系统，其特征在于，所述若干第一相机获取清晰图像的范围具有重叠范围，所述第二相机的成像面在所述重叠范围内。

5.根据权利要求1所述的系统，其特征在于，所述第二相机采集到的图像为平面图像，所述平面图像为所述三维图像中垂直所述第二相机的光轴方向的一层。

6.根据权利要求1所述的系统，其特征在于，所述第一波段的光为可见光，拍摄得到的图像为可见光图像；和/或，

所述第二波段的光为红外光，拍摄得到的图像为红外图像。

7.根据权利要求6所述的系统，其特征在于，所述第二波段的光为红外二区的光。

8.根据权利要求1所述的系统，其特征在于，所述成像模块中的第一相机和第二相机的光轴相互平行，所述第二相机置于所述若干第一相机的中心位置。

9.根据权利要求1所述的系统，其特征在于，所述多目相机包括两个第一相机，所述两个第一相机分别位于所述第二相机的两侧，且其中一个第一相机与所述第二相机的中心轴间距等于另一第一相机与所述第二相机的中心轴间距。

10.根据权利要求6所述的系统，其特征在于，所述成像模块还包括：

滤光片，用于滤除第二波段以外的光，保留第二波段的光供所述第二相机采集。

11.根据权利要求1所述的系统，其特征在于，所述若干第一相机的参数相同。

12.根据权利要求1所述的系统，其特征在于，还包括：

测距模块，用于获取所述成像模块的工作距离，所述工作距离为所述成像模块到待观测物表面的距离信息；

相应的，所述图像处理模块还用于：根据所述测距模块采集到的距离信息调节所述成像模块的焦距值和/或聚焦值和/或融合参数。