[发明专利]应用于多目相机的视频同步方法

说明书

本发明公开了一应用于多目相机的视频同步方法，所述多目相机包括第一数据获取设备和第二数据获取设备。所述方法包括步骤：获取由所述第一数据获取设备在特定时间段内采集的第一视频数据和由所述第二数据获取设备在该特定时间段内采集的第二视频数据，所述第一视频数据和所述第二视频数据包括一系列图像帧；以及，波形同步所述第一视频数据和所述第二视频数据。这样，在通过硬件设备对所述第一视频数据和所述第二视频数据进行波形同步。

本申请是中国申请号为201711346530.1、发明名称为“应用于多目相机的视频同步方法”的专利申请的分案申请。

技术领域

本发明涉及一视频技术领域，尤其涉及一适用于多目相机的视频同步方法，所述视频同步方法同步至少两数据获取设备在同一时刻获取的视频数据，从而提高融合视频的视频质量。

背景技术

随着摄像领域的不断发展，通过单一摄像头获取图像或视频数据的方式已经不足以满足市场需求了。或者说，单一摄像头已经不能满足一些特殊场景的拍摄需求了。越来越多的应用场景都需要两个，三个甚至多个摄像头同时工作，同时获取数据，并对这些数据进行综合处理。为了满足这些特殊场景的需求，多目相机得到了越来越多的关注，多目相机指的是同时包括多个摄像头或多个相机的设备，比如双目，TOF相机，全景相机在广义程度上都可被认为是多目相机。

多目相机在很多技术领域都有广泛的应用，以多目相机被应用于机器视觉技术为例，机器视觉在人类生活中已经扮演着越来越重要的角色。类似航拍无人机的自动跟踪及避障，AR(Augmented Reality)，VR(Virtual Reality)，ADAS(Advanced Driver AssistantSystem)及SLAM(Simultaneous Localization And Mapping)等领域都需要用到这项技术，在机器视觉中必不可少的功能就是深度感知。而与深度感知相关的双目、结构光或TOF等技术的典型应用中，一般都需要动用到多个相机。或者以多目相机被应用于全景拍摄为例，全景拍摄往往也需要多个相机同时获取同一场景不同角度的数据，并对这些数据进行拼接处理，从而得到满足视觉需求的全景图像。在这些场景中都无可避免地需要应用到多目相机。

在多目相机的实际应用中，多目相机的多个数据获取设备获取同一时刻同一场景的数据，当然，不同数据获取设备可获取相同的数据，也可获取不同的数据，随后多目相机或者其他数据处理设备对这些数据进行融合处理，并得到满足实际需求的图像或视频数据。在多目相机的数据处理过程中，非常重要的一步就是同步处理获取得到的数据，具体而言，同步处理的过程就是同步多个数据获取设备获取的数据，以得到同一时刻的融合数据。

然而由于多目相机中的多个数据获取设备彼此之间可能存在时延，时钟设置不一致等问题，而导致目前多目相机的数据融合效果并不尽如人意，从而限制了多目相机的普及应用。特别是当多目相机被应用于拍摄视频时，不同视频数据的融合问题更为突出。具体而言，多个数据获取设备获取同一时间段的同一场景的视频数据，在视频数据的融合过程中，需要对应每一个时间点不同数据获取设备获取的帧数据，而一旦某些帧数据发生错位或者丢失时，将极大程度地影响最终的视频质量。举例来说，由于视频同步方法的缺陷，一个数据获取设备获取的第一帧数据可能会对应于另一个数据获取设备获取的第二帧数据，这样得到的融合数据会偏移实际场景。

在一些现有技术中，选择牺牲不同步的视频数据的方式来保证得到同步的融合视频。具体而言，在一些现有技术的视频处理过程中，只截取一部分被同步的视频数据，而抛弃不被同步的视频数据，这种方式大大地浪费了视频数据的利用率。在另一些现有技术中，选择降低视频数据质量的方式来得到视频，这种方式极大程度地影响了融合视频的观赏质量以及后续的数据利用。

综上所述，由于多目相机中的不同数据获取设备的工作性能，相机参数都不尽相同，如果保证不同数据获取设备获取的数据被同步依旧是多目相机的视频同步过程中亟待解决的问题。

发明内容