[发明专利]用于机内循环、图像到视频计算机视觉引导的方法与装置

摘要

公开了用于在由设备、服务器和/或平台支持或配置有设备、服务器和/或平台的内容搜索、托管和/或提供系统中改进与计算机的交互和计算机之间的交互的系统和方法。所公开的系统和方法提供了一种新颖的机内循环、图像到视频引导框架，该框架利用建立在图像数据集和视频数据集上的训练集，以便高效地产生精确的训练集，以应用于视频帧。所公开的系统和方法减少了构建训练数据集所需的时间，并提供了将训练数据集应用于任何类型的内容和任何类型的识别任务的机制。

主权项

1.一种方法，包括以下步骤：在计算设备处接收包括搜索项的搜索查询；通过所述计算设备搜索图像的集合，并且基于所述搜索标识图像集，所述图像集包括描绘所述搜索项的内容；通过所述计算设备搜索视频的集合，并且基于所述搜索标识视频集，所述视频集中的每个视频包括至少一个视频帧，所述至少一个视频帧包括描绘所述搜索项的内容；通过所述计算设备，在所述图像集和所述视频集上执行对象检测软件，所述执行包括分析所述图像集和标识与所述图像集中的每个图像内的描绘所述搜索项的所述内容相关的信息，并且基于所述分析，基于来自所述图像集的所标识的信息，对所述视频集中的视频帧执行视觉对象检测；通过所述计算设备基于所述视觉对象检测生成带注释的视频帧集，所述生成包括用指示对所述搜索项的描绘被描绘在其中的信息来注释所述视频集中的视频的包括描绘所述搜索项的所述内容的视频帧；以及通过所述计算设备，用所述生成的带注释的视频帧集来训练视觉识别器软件。