[发明专利]一种内镜下自动识别活检部位及活检数量的方法及系统

权利要求书

1.一种内镜下自动识别活检部位及活检数量的方法，其特征在于，包括以下步骤：

获取内镜检查过程中实时采集的视频帧；

基于预先训练的活检钳检测模型，逐帧检测是否存在活检钳；

若存在活检钳，基于预先训练的内镜部位识别模型，确定当前取活检的内镜部位；同时，开始对活检钳进行跟踪，得到包含所述活检钳的连续视频片段，根据预先训练的取活检动作识别模型，确定是否进行取活检;

所述方法还包括：记录所述内镜检查的部位和各部位对应的取活检次数。

2.如权利要求1所述的内镜下自动识别活检部位及活检数量的方法，其特征在于，所述活检钳检测模型和内镜部位识别模型均采用卷积神经网络进行训练。

3.如权利要求1所述的内镜下自动识别活检部位及活检数量的方法，其特征在于，所述取活检动作识别模型采用3D卷积神经网络进行训练。

4.如权利要求1所述的内镜下自动识别活检部位及活检数量的方法，其特征在于，所述对活检钳进行跟踪采用活检钳检测模型；获取活检钳一直存在或活检钳消失的时间小于k帧的连续视频帧，基于该连续视频帧进行取活检动作识别。

5.一种内镜下自动识别活检部位及活检数量的系统，其特征在于，包括：

图像获取模块，获取内镜检查过程中实时采集的视频帧；

活检钳检测模块，基于预先训练的活检钳检测模型，逐帧检测是否存在活检钳；

活检部位识别模块，用于在存在活检钳时，基于预先训练的内镜部位识别模型，确定当前取活检的内镜部位；

取活检动作识别模块，用于在存在活检钳时，对活检钳进行跟踪，得到包含所述活检钳的连续视频片段，根据预先训练的取活检动作识别模型，确定是否进行取活检;

取活检次数模块,用于记录所述内镜检查的部位和各部位对应的取活检次数。

6.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-4任一项所述内镜下自动识别活检部位及活检数量的方法。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-4任一项所述内镜下自动识别活检部位及活检数量的方法。