[发明专利]金字塔模型的处理方法和装置、图像编码方法和装置

说明书

本申请实施例提供了一种金字塔模型的处理方法和装置、图像编码方法和装置，其中的方法具体包括：根据全景视频图像对应的三维模型，确定所述全景视频图像对应的平面图像，其中：所述平面图像包括：根据所述三维模型底面的图像映射得到的第一图像，以及，根据所述三维模型侧面的多个图像映射得到的第二图像，所述第一图像和所述第二图像的一条边邻接。本申请实施例可以有效降低输出图像的渲染过程中产生的缝隙效应，进而提升用户对于输出图像的观看体验。

技术领域

本申请涉及图像处理技术领域，特别是涉及一种金字塔模型的处理方法、一种金字塔模型的处理装置、一种图像编码方法和一种图像编码装置。

背景技术

全景视频指的是超过一般视野的广角视频内容，例如，环形/柱形360度视频可以提供360度的视野。全景视频展示的范围非常广，可以覆盖住体验者整个视角，因此能够很好地提高视觉体验。

目前，为了实现全景视频的传输，现有方案可以在发送端对全景视频进行转码，相应的转码过程可以包括：将全景视频图像映射至三维模型，将包含映射图像的三维模型展开为二维平面图像，并对该二维平面图像进行编码，以得到编码流；这样，接收端在接收到编码流后，可以对该编码流进行解码，以从中恢复出二维平面图像，并按照与发送端相应的方法，依据该二维平面图像进行三维模型的重构，进而利用重构得到的三维模型进行输出图像的渲染。

发明人在实施本申请实施例的过程中发现，现有方案在三维模型的重构过程中容易出现图像的不连续性问题，这将导致输出图像的渲染过程中产生缝隙效应，从而影响用户对于输出图像的观看体验。

发明内容

本申请实施例所要解决的技术问题是提供一种金字塔模型的处理方法，能够有效降低输出图像的渲染过程中产生的缝隙效应，进而提升用户对于输出图像的观看体验。

相应的，本申请实施例还提供了一种金字塔模型的处理装置、一种图像编码方法和一种图像编码装置，用以保证上述方法的实现及应用。

为了解决上述问题，本申请公开了一种金字塔模型的处理方法，包括：

根据全景视频图像对应的三维模型，确定所述全景视频图像对应的平面图像，其中：所述平面图像包括：根据所述三维模型底面的图像映射得到的第一图像，以及，根据所述三维模型侧面的多个图像映射得到的第二图像，所述第一图像和所述第二图像的一条边邻接。

本申请公开了一种图像编码方法，包括：

根据全景视频图像对应的三维模型，确定所述全景视频图像对应的平面图像，其中：所述平面图像包括：根据所述三维模型底面的图像映射得到的第一图像，以及，根据所述三维模型侧面的多个图像映射得到的第二图像，所述第一图像和所述第二图像的一条边邻接；

依据所述全景视频图像到所述三维模型的下采样率，从所述第二图像中划分出至少两个子区域；

采用所述子区域对应的滤波模板对所述子区域分别进行滤波处理；

对滤波处理后的平面图像进行编码，以得到对应的编码流。

本申请公开了一种金字塔模型的处理装置，包括：

平面图像确定模块，用于根据全景视频图像对应的三维模型，确定所述全景视频图像对应的平面图像，其中：所述平面图像包括：根据所述三维模型底面的图像映射得到的第一图像，以及，根据所述三维模型侧面的多个图像映射得到的第二图像，所述第一图像和所述第二图像的一条边邻接。

本申请公开了一种图像编码装置，包括：

确定模块，用于根据全景视频图像对应的三维模型，确定所述全景视频图像对应的平面图像，其中：所述平面图像包括：根据所述三维模型底面的图像映射得到的第一图像，以及，根据所述三维模型侧面的多个图像映射得到的第二图像，所述第一图像和所述第二图像的一条边邻接；