[发明专利]一种基于信息融合的分类方法、装置及设备

说明书

本说明书实施例公开了一种基于信息融合的分类方法、装置及设备，该分类方法包括：获取待处理的第一影像数据、第二影像数据及第三影像数据；将所述待处理的第一影像数据、第二影像数据及第三影像数据分别输入至预设的第一特征提取模型、第二特征提取模型及第三特征提取模型，获得第一特征数据、第二特征数据及第三特征数据；将所述第一特征数据、所述第二特征数据及所述第三特征数据进行拼接，获得拼接特征数据；将所述拼接特征数据作为改造的transformer编码器的输入，获得所述改造的transformer编码器输出的融合特征数据；将所述改造的transformer编码器输出的融合特征数据分别输入预设的分类模型中，获得诊断结果。

技术领域

本说明书涉及医学影像及计算机技术领域，尤其涉及一种基于信息融合的分类方法、装置及设备。

背景技术

临床诊断过程中很多疾病往往有病因等层面的关联，使得其联合发病概率较高形成一种临床先验经验。例如，膝关节MRI场景中也存在类似情况，比如半月板损伤、骨挫伤和前交叉韧带损伤就有很强的关联性。这是因为膝关节中最常见的损伤是运动损伤，膝关节整体作为一个运动关节的同时承受了相当部分的身体重量，损伤多数出现在关节扭动、剧烈碰撞等情况下，该情况下往往会伴随多个部位损伤的情况，所以临床大夫在观察到一种损伤情况的同时也会着重观察其他相关联部位的损伤。

现有技术中，对疾病的诊断，一般利用一个部位的信息进行诊断分析，而无法完成多个部位信息的融合，导致诊断结果的准确性差、可信度低，参考价值不大。

基于此，需要一种基于信息融合的分类方法。

发明内容

本说明书实施例提供一种基于信息融合的分类方法、装置及设备，用于解决以下技术问题：现有技术中，无法完成多个部位信息的融合，导致诊断结果的准确性差、可信度低，参考价值不大。

为解决上述技术问题，本说明书实施例是这样实现的：

本说明书实施例提供的一种基于信息融合的分类方法，该分类方法包括：

获取待处理的第一影像数据、待处理的第二影像数据及待处理的第三影像数据，所述第一影像数据为半月板的影像数据，所述第二影像数据为前交叉韧带的影像数据，所述第三影像数据为骨骼的影像数据；

将所述待处理的第一影像数据、待处理的第二影像数据及待处理的第三影像数据分别输入至预设的第一特征提取模型、第二特征提取模型及第三特征提取模型，获得第一特征数据、第二特征数据及第三特征数据；

将所述第一特征数据、所述第二特征数据及所述第三特征数据进行拼接，获得拼接特征数据；

将所述拼接特征数据作为改造的transformer编码器的输入，获得所述改造的transformer编码器输出的融合特征数据；

将所述改造的transformer编码器输出的融合特征数据分别输入预设的分类模型中，获得诊断结果，所述诊断结果包括半月板损伤分类结果及前交叉韧带损伤分类结果。

本说明书实施例提供的一种基于信息融合的分类装置，该分类装置包括：

获取模块，获取待处理的第一影像数据、待处理的第二影像数据及待处理的第三影像数据，所述第一影像数据为半月板的影像数据，所述第二影像数据为前交叉韧带的影像数据，所述第三影像数据为骨骼的影像数据；

特征提取模块，将所述待处理的第一影像数据、待处理的第二影像数据及待处理的第三影像数据分别输入至预设的第一特征提取模型、第二特征提取模型及第三特征提取模型，获得第一特征数据、第二特征数据及第三特征数据；

拼接模块，将所述第一特征数据、所述第二特征数据及所述第三特征数据进行拼接，获得拼接特征数据；