[发明专利]用于视频处理的系统和方法

说明书

一种用于多个视频流之间的视频同步的系统及其制造和使用方法。视频同步系统可以使查找帧序列中的视频帧相对于参考帧序列同步，对查找帧序列中的帧进行排序，以使查找帧序列的图像数据对应于参考帧序列的图像数据。可以针对源自单个成像装置或多个成像装置的视频流执行视频同步。可以使用图像数据中的点序列来执行查找帧序列与参考序列的比较。点序列中的点可以是各个像素或具有一个或多个像素的各个特征。可以通过使相应图像数据之间的相关性最大化来执行视频同步。该系统和方法有利地适用于同步从诸如无人机之类的移动平台获取的视频。

版权声明

本专利文件的公开的一部分包含受到版权保护的材料。版权所有者不反对任何人对专利文献或专利公开的传真复制，因为它出现在专利和商标局的专利文件或记录中，但在其他方面保留所有版权。

技术领域

所公开的实施例总体上涉及图像处理，并且更具体地但不排他地涉及用于同步多个视频流的系统和方法。

背景技术

视频同步是使不同视频流时间对齐。视频同步具有许多应用。例如，可以从不同的有利位置拍摄特定事件的不同视频，之后可以同步视频以创建所述事件的合并视图。视频同步难以手动执行，这是因为人眼无法轻易地区分以快速帧速率示出的视频帧。另一种同步技术是时间戳，其中视频流的每一帧都标记有该帧的拍摄时间。随后，可以同步不同视频流之间具有匹配时间戳的帧。然而，用于视频同步的时间戳要求视频流源自的成像装置精确同步且无错误。这些标准在实践中很难满足，因此时间戳视频同步方法常常会引起错误。

鉴于前述内容，需要克服当前视频同步方法问题的用于视频同步的系统和方法。

发明内容

根据本文所公开的第一方面，提出了一种视频同步的方法，包括：

将来自参考帧序列的图像数据与查找帧序列的对应图像数据进行比较；以及

基于所述比较将查找帧序列与参考帧序列对齐。

根据本文所公开的另一方面，提出了一种视频同步系统，包括：

一个或多个传感器，被配置为接收第一视频流和第二视频流；以及

处理器，被配置为：

从所述第一视频流获取参考帧序列，并从所述第二视频流获取查找帧序列；

将来自所述参考帧序列的图像数据与所述查找帧序列的对应图像数据进行比较；以及

基于比较的图像数据将所述查找帧序列与所述参考帧序列对齐。

根据本文所公开的另一方面，提出了一种设备，包括处理器，所述处理器被配置为：

从第一视频流中获取参考帧序列，并从第二视频流中获取查找帧序列；

将来自所述参考帧序列的图像数据与所述查找帧序列的对应图像数据进行比较；以及

基于比较的图像数据将所述查找帧序列与所述参考帧序列对齐。

根据本文所公开的另一方面，提出了一种计算机可读存储介质，包括：

用于将来自参考帧序列的图像数据与查找帧序列的对应图像数据进行比较的指令；以及

用于基于所述比较将查找帧序列与参考帧序列对齐的指令。

根据本文所公开的另一方面，提出了一种处理系统，包括：

获取模块，被配置为用于从参考帧序列获取图像数据并获取查找帧序列的对应图像数据；

比较模块，用于将来自参考帧序列的图像数据与查找帧序列的对应图像数据进行比较；以及

对齐模块，用于基于比较的图像数据将查找帧序列与参考帧序列对齐。