[发明专利]基于循环生成对抗网络CycleGAN模型的跨模态MR影像互生成方法

说明书

本发明属于计算机视觉领域，提供了一种基于循环生成对抗网络CycleGAN模型的跨模态MR影像互生成方法，使用了CycleGAN模型模型，可以生成对目标模态真实影像具有良好近似度的合成影像，而采用了循环的网络结构可以将模型的训练集由两两配对的源模态与目标模态影像的限制弱化为不需要配对的影像，这使得模型的训练难度降低，使用场景更广。同时，本发明能够通过跨模态MR影像互生成模型获得较为真实的不同模态MR影像，相较于简单的数据增强方法，合成影像具有更好的保真度并保留了更多的生物组织结构信息的优势，能够作为MR影像的分割、分类等下游任务的模型的训练数据，起到了扩充训练集和数据增强的作用，能够有效缓解MR影像获取难度大和数据稀缺的问题。

技术领域

本发明属于计算机视觉领域，具体涉及一种基于循环生成对抗网络CycleGAN模型的跨模态MR影像互生成方法。

背景技术

核磁共振成像技术是一种常用的且十分重要的疾病监测技术，核磁共振医学影像(MR印象)可以反映人体器官的侧面、冠状、矢状以及任何方向截断面的影像和人体器官的丰富的纹理信息，因此MR影像被广泛地用于临床诊断(如疾病的早期诊断)、手术模拟以及生物组织物理特性的评估。作为软组织病灶评估的首选方法，MR影像可以提供多种不同的对比度，通过同一处病理的不同对比度影像，提供更加丰富的诊断信息。如T1加权影像对于灰质和白质的描述很有效，而T2加权影像对于流体和脂肪的描述则更有用，其中T1与T2是MR成像过程中的两种弛豫时间，表示两种不同模态的MR影像。

近年来，随着深度学习的不断发展，MR成像技术在医学影像分析领域越发重要。对MR影像进行分类、分割等任务的神经网络深度学习模型需要大量的样本作为训练集，而MR影像不同于人脸、服装等影像，它涉及到病人的隐私等问题，一般难以获取到大量数据。同时，大量拍摄MR影像也存在着成本高昂，速度缓慢等缺点。

目前解决医学影像样本稀缺问题主要采用的是数据集扩充的方式，传统的数据集扩充方法包括旋转、翻转、裁剪等，但是这些方法只提供全局影像变换，不改变影像的细节，使得产生的影像是高度相似的，这会导致深度学习模型过拟合，影响得到的最终影像。随着生成对抗网络(GAN)的产生和不断发展，提升了医学影像的生成质量和生成速度，其仅利用相同特征分布的影像数据，通过特征提取的方式进行影像的生成，为医学影像合成提供了新的思路。然而由于GAN利用随机噪声生成影像不能模拟生物组织的纹理结构信息的局限性，其生成的影像质量依然不高，存在保真度较低以及生物组织结构信息丢失等问题。而且GAN要求在模型训练的过程中，用作输入的源模态影像和目标模态的真实影像是配对的，以此来使得损失函数最小化，从而训练模型，在这种训练过程中，仍旧存在MR影像获取难度大，能够作为训练集的数据较为稀缺的问题。

发明内容

本发明是为了解决上述问题而进行的，目的在于提供一种基于循环生成对抗网络CycleGAN模型的跨模态MR影像互生成方法。

本发明提供了一种基于循环生成对抗网络CycleGAN模型的跨模态MR影像互生成方法，具有这样的特征，包括如下步骤：步骤S1，将待使用MR影像进行预处理，得到源模态MR影像；步骤S2，将源模态MR影像输入训练好的循环生成对抗网络CycleGAN模型模型中，得到目标模态的MR影像，其中，循环生成对抗网络CycleGAN模型模型的训练过程如下：步骤A1，构建循环生成对抗网络CycleGAN模型模型；步骤A2，将未配对的训练用源模态MR影像集合作为训练集输入到循环生成对抗网络CycleGAN模型模型中，对循环生成对抗网络CycleGAN模型模型进行训练，得到训练好的循环生成对抗网络CycleGAN模型模型，循环生成对抗网络CycleGAN模型模型包括生成器和判别器，生成器的输入为源模态MR影像，输出为目标模态的MR影像，判别器的输入为生成器输出的目标模态的MR影像，输出为概率值，概率值用于对生成器输出的目标模态的MR影像进行真假判别。