[发明专利]用深度图像到图像网络和对抗网络的跨域图像分析和合成

摘要

公开了使用深度图像到图像网络和对抗网络的用于跨域医学图像分析和跨域医学图像合成的方法和装置。在用于跨域医学图像分析的方法中，接收患者的来自第一域的医学图像。将医学图像输入到跨域深度图像到图像网络（DI2IN）的第一编码器，所述DI2IN包括用于第一域的第一编码器、用于第二域的第二编码器、和解码器。第一编码器将医学图像转换为特征图，并且解码器从特征图生成输出图像，所述输出图像提供医学图像分析任务的结果。至少部分地基于第一编码器从来自第一域的训练图像生成的特征图与第二编码器从来自第二域的训练图像生成的特征图的相似性来一起训练第一编码器和第二编码器，并训练解码器以从第一编码器或第二编码器生成的特征图生成输出图像。

主权项

1.一种用于在患者的医学图像上自动执行基于跨域的医学图像分析的方法，包括：接收患者的来自第一域的医学图像；将所述患者的所述医学图像输入到跨域深度图像到图像网络的第一编码器，所述跨域深度图像到图像网络包括用于所述第一域的所述第一编码器、用于第二域的第二编码器和解码器；以及由将来自所述第一域的所输入医学图像转换为特征图的所述第一编码器和从所述第一编码器生成的特征图生成输出图像的解码器，使用所述跨域深度图像到图像网络自动生成所述输出图像，所述输出图像提供所输入医学图像上的目标医学图像分析任务的结果，其中至少部分地基于由所述第一编码器从来自所述第一域的训练输入图像生成的特征图和由所述第二编码器从来自所述第二域的训练输入图像生成的特征图的相似性，来一起训练用于所述第一域的所述第一编码器与用于所述第二域的所述第二编码器，并且训练所述解码器以从所述第一编码器生成的特征图和所述第二编码器生成的特征图来生成输出图像。