[发明专利]一种多模态医学图像的配准方法及相关装置

权利要求书

1.一种多模态医学图像的配准方法，其特征在于，所述配准方法包括：

将待配准的第一模态图像和第二模态图像输入风格转换模块，通过所述风格转换模块确定所述第一模态图像对应的第二模态转换图像以及所述第二模态图像对应的第一模态转换图像；

将所述第一模态图像和所述第一模态转换图像输入第一配准模块，通过所述第一配准模块确定第一形变场，并基于所述第一形变场确定所述第一模态图像对应的第一配准图像；

将所述第二模态图像和所述第二模态转换图像输入第二配准模块，通过所述第二配准模块确定第二形变场，并基于所述第二形变场确定所述第二模态图像对应的第二配准图像。

2.根据权利要求1所述多模态医学图像的配准方法，其特征在于，所述第一配准模块的模块结构和第二配准模块的模块结构相同，所述第一配准模块包括刚体变换单元、仿射单元、非刚体变换单元以及形变单元，所述将所述第一模态图像和所述第一模态转换图像输入第一配准模块，通过所述第一配准模块确定第一形变场并基于所述第一形变场确定所述第一模态图像对应的第一配准图像具体包括：

将所述第一模态图像和所述第一模态转换图像输入刚体变换单元，通过刚体变换单元确定仿射矩阵；

将所述仿射矩阵以及第一模态转换图像输入仿射单元，通过仿射单元输出仿射图像；

将所述仿射图像以及第一模态图像输入非刚体变换单元，通过非刚体变换单元确定第一形变场；

将第一形变场和仿射图像输入形变单元，通过形变单元确定第一配准图像。

3.根据权利要求1所述多模态医学图像的配准方法，其特征在于，所述风格转换模块包括第一生成单元和第二生成单元，所述将待配准的第一模态图像和第二模态图像输入风格转换模块，通过所述风格转换模块确定所述第一模态图像对应的第二模态转换图像以及所述第二模态图像对应的第一模态转换图像具体包括：

将待配准的第一模态图像输入第一生成单元，通过第一生成单元确定所述第一模态图像对应的第二模态转换图像；

将待配准的第二模态图像输入第二生成单元，通过第二生成单元确定所述第二模态图像对应的第一模态转换图像。

4.根据权利要求1或3所述多模态医学图像的配准方法，其特征在于，所述风格转换模块的训练过程具体包括：

将第一模态训练图像T1分别输入第一生成器G1和第二生成器G2，通过第一生成器G1生成第一预测图像sT2，通过第二生成器G2生成第二预测图像iT1，并将第一预测图像sT2输入第二生成器G2，通过第二生成器G2生成第三预测图像rT1；

将第二模态训练图像T2分别输入第一生成器G1和第二生成器G2，通过第一生成器G1生成第四预测图像iT2，通过第二生成器G2生成第五预测图像sT1，并将第五预测图像sT1输入第一生成器G1，通过第一生成器G1生成第六预测图像rT2；

将第一模态训练图像T1和第五预测图像sT1输入第一判别器D1，通过第一判别器D1确定第一模态训练图像T1对应的第一真实概率以及第五预测图像sT1对应的第二真实概率；

将第二模态训练图像T2和第一预测图像sT2输入第二判别器D2，通过第二判别器D2确定第二模态训练图像T2对应的是第三真实概率以及第一预测图像sT2对应的第四真实概率；

基于所述第一模态训练图像T1、第二模态训练图像T2、第一预测图像sT2、第二预测图像iT1、第三预测图像rT1、第四预测图像iT2、第五预测图像sT1、第六预测图像rT2、第一真实概率、第二真实概率、第三真实概率以及第四真实概率对所述第一生成器G1、第二生成器G2、第一判别器D1以及第二判别器D2进行训练，并将训练得到的第一生成器G1作为第一生成单元，第二生成器G2作为第二生成单元，以得到风格转换模块。