[发明专利]一种基于类激活映射的医学图像弱监督分割方法在审
申请号: | 202310197271.X | 申请日: | 2023-03-03 |
公开(公告)号: | CN116309681A | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 刘博;丁磊;杨滨;王强;汪婧懿 | 申请(专利权)人: | 北京工业大学 |
主分类号: | G06T7/194 | 分类号: | G06T7/194;G06T7/12;G06N3/0464;G06N3/0895 |
代理公司: | 北京思海天达知识产权代理有限公司 11203 | 代理人: | 王兆波 |
地址: | 100024 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 激活 映射 医学 图像 监督 分割 方法 | ||
1.一种基于类激活映射的医学图像弱监督分割方法,其特征在于:包括下述步骤,
步骤一,采集组织病理图像;
步骤二,对步骤一获取的组织病理图像进行缩放、调整和增强操作;
步骤三,使用中间层的特征图对步骤二处理的组织病理图像进行激活,并输出类激活映射;
步骤四,使用一致性损失对步骤三输出的类激活映射进行正则处理,完成病理图像的弱监督分割。
2.根据权利要求1所述的一种基于类激活映射的医学图像弱监督分割方法,其特征在于:步骤二的实现过程如下,
为便于训练,先将组织病理图像压缩成416×416像素,确保具有大小统一的尺寸;其次,将图像的亮度、对比度、饱和度和色调分别统一为0.5、0.5、0.5和0.05;对样本进行翻转和镜像数据增强操作。
3.根据权利要求1所述的一种基于类激活映射的医学图像弱监督分割方法,其特征在于,步骤三的实现过程如下:
定义获取的训练样本{{X1,Y1},...,{Xi,Yi},...,{Xn,Yn}},其中n表示数据集总数,Xi表示第i个病理图像,大小为416×416,Yi∈{0,1}为该病理图像对应的图像级标签;
将图像X作为输入,使用残差网络作为主干网络;定义M1,M2,M3和M4为该主干网络后4个残差模块的特征图,其通道数目分别为64,128,256和512;
将M1,M2,M3降采样到与M4同一尺寸后拼接成一个新的特征图Md=[down8(M1),down4(M2),down2(M3)];down2(*)表示将数据降采样2倍;定义为Md第k通道上坐标为(x,y)的激活值;对特征图Md进行最大池化,得到单通道的特征图
定义为坐标为(x,y)的激活值,使用对特征图M4进行掩码,从而约束分割边界,即
fa=ReLu(ft-α)*ft
其中α为阈值,是人工设定的超参;ReLu(*)为修正线性激活函数;fa为激活值;为将M4激活后的结果;
定义为第k通道上的坐标为(x,y)的激活值,则第k通道全局平均池化的结果为以此得到病理图像X属于类别c的概率值pc;
c∈{0,1}表示类别,表示Fk对于类别c的权重;pc表示病理图像X属于类别c的概率值;这里对pc使用交叉熵损失函数完成数据集的分类,并在梯度回传时更新模型参数:
其中,n表示样本的总个数,表示病理图像Xi属于类别c的概率值,Lce1为样本的总交叉熵损失值;
定义CAMc为类别c的类激活映射图,则
CAMc直接表示(x,y)的激活值对图像分类为c的重要性;其中c=1表示为病变,k为通道数;将CAMc=1与原图X的相同位置点乘,只获取原病理图像X的病变区域,定义为Xpos,即
Xpos=X*CAMc=1
同样获取Xpos属于类别c的概率值qc,以及新的类激活映射图对qc使用交叉熵损失函数完成数据集的分类,并在梯度回传时更新模型参数:
其中,n表示样本的总个数,表示病理图像Xi属于类别c的概率值,Lce2为样本的总交叉熵损失值;
最终的分类损失为两个交叉熵损失值得和:
Lce=Lce1+Lce2。
4.根据权利要求1所述的一种基于类激活映射的医学图像弱监督分割方法,其特征在于,步骤四的实现过程如下:
将原病理图像X进行镜像、旋转、局部擦除等操作,得到Xt,即:
Xt=transform(X)
其中transform(*)为镜像、旋转、局部擦除操作函数;使用步骤三同样方法,获取Xt的类激活映射图与此同时,步骤三已经获得原病理图像X的病变区域Xpos的类激活映射图则构建一致性损失对模型参数进行正则处理:
步骤三已构建分类损失Lce:
Lce=Lce1+Lce2
结合步骤三和步骤四,最终的模型损失函数为:
Loss=Lce+Lre
模型训练完成后,输出的原病理图像X的类激活映射图CAMc作为X的伪标签,进一步训练分割模型,完成病理图像的弱监督分割任务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京工业大学,未经北京工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310197271.X/1.html,转载请声明来源钻瓜专利网。