[发明专利]一种基于时空循环注意力机制的CT淋巴结检测系统有效
申请号: | 201910570878.1 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110335261B | 公开(公告)日: | 2020-04-17 |
发明(设计)人: | 彭海欣;马英然;王元红;彭延军;卢新明 | 申请(专利权)人: | 山东科技大学 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06N3/04;G06N3/08 |
代理公司: | 青岛智地领创专利代理有限公司 37252 | 代理人: | 陈海滨 |
地址: | 266590 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 时空 循环 注意力 机制 ct 淋巴结 检测 系统 | ||
本发明公开了一种基于时空循环注意力机制的CT淋巴结检测系统,具体涉及医学图像分析技术领域。本发明基于深度卷积神经网络和循环注意力机制,能够在淋巴结CT序列的切片向和空间域内构造出自适应病灶尺寸的注意力特征图谱。首先,利用一预训练卷积网络提取出淋巴结CT图像对应的高层空间特征;其次在空间邻域内,以淋巴结中心切片为基准,构造一种基于高斯核函数的循环注意力机制;在此基础上,实施基于高斯混合模型的时间(切片方向)注意力机制;此外,根据淋巴结在CT切片序列内位置分布的先验信息,对预测的注意力位置进行约束;最后,循环神经网络综合该两种注意力方法提取到的高层特征进行分类,得到淋巴结检测结果。
技术领域
本发明涉及医学图像分析技术领域,具体涉及一种基于时空循环注意力机制的CT淋巴结检测系统。
背景技术
在将深度学习模型应用到医学图像分析领域时,鉴于医学图像特殊的成像特点,模型往往受到医学分析目标的不同大小、形状、尺度、成像质量、背景组织器官等情况的影响,分析准确性有待提高。
视觉注意力机制可以模仿人眼对视觉信息特有的关注机制,能够对感兴趣区域进行准确定位,进一步克服无关信息对模型的影响。有鉴于此,本发明将传统的面向自然图像的深度视觉注意力模型应用到淋巴结CT序列图像中,对淋巴结进行真假阳性分类,以提高深度学习方法在病灶检测方面的准确度。
发明内容
本发明的目的是针对上述不足,提出了一种基于循环注意力机制,根据CT图像呈现序列化特点,基于高斯核函数和混合密度网络,融合空间向、切片向两个维度的视觉注意力过程的CT淋巴结检测系统。
本发明具体采用如下技术方案:
一种基于时空循环注意力机制的CT淋巴结检测系统,包括训练样本提取模块、深层特征提取网络、特征嵌入网络和时空循环注意力目标检测模块,检测过程包括以下步骤:
步骤一:利用训练样本提取模块对获取到的淋巴结dcm格式文件及对应的淋巴结标注位置坐标信息,采用python中的pydicom模块对每个淋巴结抽取出长度为L,宽为W、高为H的CT切片图像块序列Ii(i=1,2,...,L),
步骤二:基于深层特征提取网络,利用由自然图像预训练好的VGG-16模型对每一淋巴结的CT切片图像块序列提取出其对应的高层空间特征图谱序列,记为{X0,...,XL};
步骤三:构建特征嵌入网络,对输入的高层特征图谱序列进行降维,输出特征图谱Ai;
步骤四:构建时空循环注意力框架,基于循环神经网络和高斯核函数,执行空间注意力机制,获得空间注意力结果
步骤五:对步骤四获得的空间注意力结果实施时间注意力机制,得到时空注意力特征
步骤六:综合步骤五得到的时空注意力特征利用步骤四已构建的循环神经网络预测出此循环注意力迭代步的淋巴结阳性得分
步骤七:构建模型的损失函数,重复T次步骤四至步骤六,利用梯度反向传播算法,对模型进行有监督训练;
步骤八:重复步骤三至七,对模型进行迭代训练,直至训练结束,得到训练好的模型;
步骤九:输入待检测的淋巴结CT序列,进行模型推理过程,将最后一次循环注意力输出的阳性得分作为CT淋巴结检测结果。
优选地,所述步骤四具体包括以下步骤:
步骤4.1:构建两层长短时循环记忆网络;
步骤4.2:构造特征图谱的编码过程,对长短时循环记忆网络的状态进行初始化;
步骤4.3:利用一发射网络,预测出在特征图谱范围内的空间注意力位置;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东科技大学,未经山东科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910570878.1/2.html,转载请声明来源钻瓜专利网。