[发明专利]预拼接图像的视频编码方法、视频解码方法和相关的装置

权利要求书

1.一种预拼接图像的视频编码方法，用于视频编码系统，其中每个预拼接图像由全景视频捕获设备的两个摄相机捕获的至少两个图像形成，并且由两个相邻摄像机捕获的两个相邻图像至少包括重叠图像区域，其特征在于，所述方法包括：

接收包括当前预拼接图像中的当前块的全景视频源数据；

接收与用于形成所述预拼接图像的拼接处理相关的拼接信息，其中所述拼接信息包括校准数据、匹配结果、接缝位置、混合水平、传感器数据或其组合；以及

使用与所述拼接处理相关的所述拼接信息来编码所述当前块，其中所述拼接信息对应于与接缝检测相关的接缝信息，并且通过利用所述接缝信息，基于接缝的帧间预测用于编码所述当前块。

2.根据权利要求1所述的方法，其特征在于，所述拼接信息对应于与投影处理相关的匹配结果，并且通过将参考预拼接图像中的参考块投影到所述当前块的坐标，应用基于投影的帧间预测以编码所述当前块。

3.根据权利要求2所述的方法，其特征在于，基于被指定为滚动、俯仰和偏航的球面坐标，所述基于投影的帧间预测执行对所述当前块的运动搜索。

4.根据权利要求3所述的方法，其特征在于，由球面运动向量指示的预测器候选使用平移矩阵投影到所述当前块的所述坐标，其中所述球面运动向量由滚动、俯仰和偏航值组成，并且所述平移矩阵是基于滚动、俯仰和偏航值得出的。

5.根据权利要求4所述的方法，其特征在于，

从所述当前块和每个预测器候选的投影预测器导出与每个预测器候选相关的残差，并计算与每个预测器候选相关的速率失真成本，并根据所述速率失真成本选择最佳预测器候选以作为所述当前块的当前预测器。

6.根据权利要求2所述的方法，其特征在于，仅当所述当前块的y位置在指定范围之外时，将所述基于投影的帧间预测应用于所述当前块；否则，将常规帧间预测应用于所述当前块，并且对于常规帧间预测，在(x，y)域中执行最佳预测器的运动搜索。

7.根据权利要求6所述的方法，其特征在于，所述指定范围对应于垂直方向上的中间范围。

8.根据权利要求1所述的方法，其特征在于，从所述全景视频源数据解析所述接缝信息，并且如果所述接缝信息存在，则执行运动搜索以识别预测器候选；并且检查接缝是否跨越任何预测器候选或所述当前块，以及检查任何预测器候选和所述当前块是否位于所述接缝的不同侧。

9.根据权利要求8所述的方法，其特征在于，如果所述接缝跨越任何预测器候选或所述当前块，则通过缩放在所述接缝一侧的所述预测器候选的像素强度，调整所述预测器候选的亮度、颜色或二者以与所述当前块相匹配；并且如果任何预测器候选和所述当前块位于所述接缝的不同侧，通过缩放所述预测器候选中的所有像素的像素强度，来调整所述预测器候选的亮度、颜色或二者以与所述当前块相匹配。

10.根据权利要求8所述的方法，其特征在于，从所述当前块和每个预测器候选的缩放的预测器导出与每个预测器候选相关的残差，并且计算与每个预测器候选相关的速率失真成本，并且根据所述速率失真成本选择最佳预测器候选以作为所述当前块的当前预测器。

11.根据权利要求1所述的方法，其特征在于，从所述全景视频源数据解析所述接缝信息，并且如果所述接缝信息不存在，常规帧间预测用于编码所述当前块。