[发明专利]用于对外科手术视频分段的系统和方法

权利要求书

1.一种用于对外科手术视频分段的方法，包括：

由计算设备的处理器接收外科手术视频，所述外科手术视频包括外科手术过程的至少一系列视频帧；

由所述处理器使用第一经训练的机器学习技术来识别在所述外科手术视频中执行的外科手术过程的类型；

在识别外科手术过程的类型之后，由所述处理器使用第二经训练的机器学习技术来识别外科手术视频的一个或多个步骤；

标识对应于所识别的步骤的外科手术视频的一个或多个视频帧；

响应于一个或多个视频帧的标识，基于外科手术视频的一个或多个步骤和一个或多个视频帧生成一个或多个书签；

由所述处理器将一个或多个书签与相应的一个或多个视频帧相关联；和

由所述处理器存储一个或多个书签。

2.根据权利要求1所述的方法，还包括：

由所述处理器从麦克风接收音频信息；以及

基于所述音频信息确定所述视频帧的标识。

3.根据权利要求2所述的方法，还包括由所述处理器使用语音识别技术从所述音频信息中识别一个或多个口说字词；以及

基于一个或多个口说字词确定所述视频帧的标识。

4.根据权利要求3所述的方法，其中，所述音频信息在外科手术过程期间被接收，并且其中，确定所述视频帧的标识在外科手术过程期间实时地发生。

5.根据权利要求1所述的方法，还包括：

由所述处理器从输入设备接收输入信息；

由所述处理器基于所述输入信息检测手势；以及

基于所述手势确定所述视频帧的标识。

6.根据权利要求5所述的方法，其中，所述输入设备包括用于外科手术机器人的外科手术工具的控制设备。

7.根据权利要求5所述的方法，其中，所述输入设备包括触敏输入设备。

8.根据权利要求1所述的方法，还包括：

由所述处理器接收对图形用户界面内的外科手术过程的选择；

由所述处理器接收对所述图形用户界面内的外科手术过程的步骤的选择；以及

在对外科手术过程和外科手术过程的步骤的选择之后接收所述视频帧的标识；

其中，生成所述书签包括：

由所述处理器基于外科手术过程和外科手术过程的步骤生成标识符，以及

由所述处理器基于所述标识符生成元数据；并且

其中，存储所述书签包括存储所述元数据。

9.根据权利要求1所述的方法，其中，存储所述书签包括在所述外科手术视频内插入元数据。

10.根据权利要求1所述的方法，其中，将书签与视频帧相关联包括生成标识所述视频帧的元数据，并且其中，存储所述书签包括将所述元数据存储在与所述外科手术视频分开的文件中。

11.根据权利要求1所述的方法，其中，所述第一经训练的机器学习技术是与所述第二经训练的机器学习技术相同的经训练的机器学习技术。

12.根据权利要求1所述的方法，其中，所述书签是第一书签，并且还包括：

接收外科手术步骤的标识；

接收第二视频帧的标识，所述第二视频帧与所述外科手术步骤的子步骤或与所述外科手术步骤相关联的事件相关联；

接收所述子步骤或所述事件的标识；

基于第二视频帧和所述子步骤或所述事件生成第二书签；

将所述第二书签与所述第一书签和所述第二视频帧相关联，所述关联包括生成书签层级信息并将所述第二书签关联为所述第一书签的子书签；以及

存储所述第二书签和所述书签层级信息。

13.根据权利要求12所述的方法，其中：

所述第一书签包括标识所述外科手术步骤的元数据；并且

所述第二书签包括标识所述子步骤或所述事件的元数据。