[发明专利]用于将视频、图像和音频数据与文本数据组合以进行综合数据分析的方法和系统

摘要

本专利公开提供了以有意义的方式组合不同格式，具体地为视频、图像和音频的形式的非文本外科手术数据的多种模态的各种实施方案，使得来自该多种模态的组合数据与文本数据兼容。在一些实施方案中，在组合该外科手术数据的多种模态之前，使用多个分割引擎来分割外科手术数据的对应模态并将其转换成对应的一组指标和参数。然后将对应于该多种模态的该多组指标和参数组合以生成组合特征组。可将该组合特征组提供给数据分析工具，以用于对该组合特征组执行综合数据分析，以生成对该外科规程的一个或多个预测。