[发明专利]一种计算结直肠镜检查过程中退镜时间的方法及装置

权利要求书

1.一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，包括：

获取内镜视频流，将所述内镜视频流拆解成内镜图像帧；

按照预设频率将所述内镜图像帧输入到预先训练好的第一深度神经网络进行检测，得到进镜终点识别结果；

按照所述预设频率将所述内镜图像帧输入到预先训练好的第二深度神经网络进行检测，得到器械识别结果；

基于所述进镜终点识别结果、所述器械识别结果对所述退镜观察时间进行更新。

2.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，在获取内镜视频流之前，包括：

采集包含退镜终点的内镜图像帧、不包含退镜终点的内镜图像帧和退镜过程的内镜图像帧，所述退镜终点包括盲肠、回盲瓣、阑尾开口；

对所述包含退镜终点的内镜图像帧进行进镜终点边缘框标注；

利用标注好的包含退镜终点内镜图像帧、不包含退镜终点内镜图像帧和退镜过程截图训练第一神经网络检测模型，得到所述预先训练好的第一深度神经网络。

3.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，在获取内镜视频流之前，还包括：

采集包含器械的内镜图像帧、不包含器械的内镜图像帧，所述器械包括活检钳、钩刀、Dual刀、IT刀、圈套器、金属夹、尼龙绳、海博刀、APC、注射针；

对所述包含器械的内镜图像帧进行器械边缘框标注；

利用标注好的包含器械的内镜图像帧、不包含器械的内镜图像帧训练第二神经网络检测模型，得到所述预先训练好的第二深度神经网络。

4.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，所述获取内镜视频流，包括：

从术中内镜主机的视频流接口中读取实时的内镜视频流或从历史存储的手术视频文件中读取内镜视频流。

5.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，所述得到进镜终点识别结果，包括：

当未识别出进镜终点边缘框时，所述退镜时间计时器不启动；

当识别出进镜终点边缘框时，启动退镜时间计时器，退镜观察时间重置为零。

6.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，所述得到器械识别结果，包括：

当检测出器械边缘框时，所述器械识别结果为存在器械；

当未检测出器械边缘框时，所述器械识别结果为不存在器械。

7.如权利要求1所述的一种计算结直肠镜检查过程中退镜时间的方法，其特征在于，所述基于所述进镜终点识别结果、所述器械识别结果对所述退镜观察时间进行更新，包括：

当所述退镜时间计时器启动，且所述器械识别结果为不存在器械时，基于所述预设频率、所述退镜观察时间计算新的退镜观察时间，根据所述新的退镜观察时间实时更新所述退镜观察时间；

当所述退镜时间计时器启动，且所述器械识别结果为存在器械时，所述退镜观察时间不更新。

8.一种计算结直肠镜检查过程中退镜时间的装置，其特征在于，包括：

视频流获取模块，用于获取内镜视频流，将所述内镜视频流拆解成内镜图像帧；

第一识别模块，用于按照预设频率将所述内镜图像帧输入到预先训练好的第一深度神经网络进行检测，得到进镜终点识别结果；

第二识别模块，用于按照所述预设频率将所述内镜图像帧输入到预先训练好的第二深度神经网络进行检测，得到器械识别结果；

退镜观察时间更新模块，用于基于所述进镜终点识别结果、所述器械识别结果对所述退镜观察时间进行更新。

9.一种电子设备，其中，该电子设备包括：

处理器以及存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行根据权利要求1-7中任一项所述的方法。

10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个指令，所述一个或多个指令当被处理器执行时，实现权利要求1-7中任一项所述的方法。