[发明专利]应用于半监督环境中以在图像帧序列中执行实例跟踪的机器学习框架

摘要

公开了应用于半监督环境中以在图像帧序列中执行实例跟踪的机器学习框架，具体提供了一种用于在视频帧序列内跟踪实例的方法和系统。所述方法包括以下步骤：通过骨干网络处理图像帧以生成一组特征图，由一个或更多个预测头处理该组特征图，并分析与视频帧序列中的两个或更多个图像帧中的一组实例相对应的嵌入特征，以在不同图像帧中的实例之间建立一对一的相关性。一个或更多个预测头包括嵌入头，该嵌入头被配置为生成与在图像帧中识别出的对象的一个或更多个实例相对应的一组嵌入特征。所述方法还可以包括：使用一组带注释的图像帧和/或多个未标记的视频帧序列来训练一个或更多个预测头。