[发明专利]视频处理的方法及装置

权利要求书

1.一种视频处理的方法，其特征在于，包括：

获取第一全向视频以及第二全向视频，所述第一全向视频与所述第二全向视频具有在第一方向的立体视差，所述第一方向为所述第一全向视频以及所述第二全向视频按照经纬度展开后对应的列方向；

根据所述第一全向视频以及所述第二全向视频，确定全向深度视频；根据所述第二全向视频以及所述全向深度视频，确定一个或者两个第三全向视频，其中若确定出一个第三全向视频，则所述第二全向视频与所述第三全向视频具有在第二方向的立体视差；若确定出两个第三全向视频，则两个第三全向视频具有在第二方向上的立体视差；所述第二方向为所述第一全向视频以及所述第二全向视频按照经纬度展开后对应的行方向。

2.根据权利要求1所述的方法，其特征在于，所述确定一个或者两个第三全向视频的步骤之后，还包括：

对已确定第三全向视频进行填洞处理，得到填洞处理后的第三全向视频。

3.根据权利要求1或2所述的方法，其特征在于，所述获取第一全向视频以及第二全向视频的步骤之后，还包括：

对所述第一全向视频以及所述第二全向视频进行校正。

4.根据权利要求3所述的方法，其特征在于，所述对所述第一全向视频以及所述第二全向视频进行校正的步骤，包括：

根据所述第一全向视频以及所述第二全向视频，确定与所述第一全向视频以及所述第二全向视频对应的视频采集设备的位置及姿态误差参数；

根据所述位置及姿态误差参数确定校正参数；

根据所述校正参数对所述第一全向视频以及所述第二全向视频进行校正。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

同步所述第一全向视频以及所述第二全向视频分别对应的时间戳。

6.根据权利要求1所述的方法，其特征在于，所述确定一个或者两个第三全向视频的步骤之后，还包括：

增强所述第二全向视频和/或已确定的第三全向视频对应的分辨率。

7.根据权利要求1所述的方法，其特征在于，所述根据所述第一全向视频以及所述第二全向视频，确定全向深度视频的步骤，包括：

根据所述第一全向视频以及所述第二全向视频，并通过训练后的深度学习网络，确定所述全向深度视频。

8.根据权利要求7所述的方法，其特征在于，所述根据所述第一全向视频以及所述第二全向视频，并通过训练后深度学习网络，确定所述全向深度视频的步骤，包括：

基于所述深度学习网络，在所述第二全向视频中确定与所述第一全向视频中每个像素点相匹配的像素点；

确定相匹配的每对像素点对应的深度信息；

基于所述深度学习网络，对所述第二全向视频中每个像素点进行语义标注；

根据所述相匹配的每对像素点分别对应的深度信息以及所述第二全向视频中每个像素点对应的语义标注信息，确定所述全向深度视频。

9.根据权利要求1所述的方法，其特征在于，根据第二全向视频以及所述全向深度视频，确定第三全向视频的步骤，包括：

步骤S1、确定第一像素点在所述已确定的全向深度视频中对应的深度信息，并根据所述第一像素点确定水平极线，所述第一像素点位于所述第二全向视频中；

步骤S2、根据所述第一像素点在所述已确定的全向深度视频中对应的深度信息以及所述水平极线，确定第二像素点；

步骤S3、循环所述步骤S1-S2直至得到第三全向视频，其中，所述第三全向视频由确定的所有第二像素点组成。