[发明专利]三维视频编解码方法及装置

权利要求书

1.一种三维视频的编码方法，其特征在于，包括：

输入一帧图像，所述一帧图像包括同一时刻多个不同视点的图像纹理信息和深度信息，构成多个视点的深度像素图；

将各个视点的深度像素图映射到主视点上，并对主视点视图的图像大小进行扩展，所述主视点的选择按照预先约定；

通过运动目标检测方法从所述纹理信息中得到运动信息，利用深度信息和/或运动信息将映射后的深度像素图中所有深度像素点重建为一个背景图层图像及一个或一个以上前景图层图像，并对背景图层图像进行时域累积操作；

将所述背景图层图像及前景图层图像分别进行编码，其中深度信息和纹理信息分别编码，并在编码中实现图层间的相互参考；

其中，所述时域累积操作为：在图层图像生成及参考图像生成时，利用到以前帧的信息。

2.根据权利要求1所述的编码方法，其特征在于，所述重建背景图层图像及前景图层图像的方法包括：将映射到主视点的所有深度像素点作为一个待分配像素集，并

合并像素点，将深度值差异和纹理值差异在预设阈值内的像素点合并为一个像素点，新的像素点的像素值为原像素值的平均；

建立背景图层图像；

建立前景图层图像；

若所述待分配像素集中还有像素点，则重复执行前一步骤，直至分配完所有像素。

3.根据权利要求2所述的编码方法，其特征在于，所述建立背景图层图像的方法包括：

针对每个像素点，取出所述待分配像素集中深度最深的像素点，与原背景图层图像的像素进行比较；

若所述深度最深像素点的深度更深，则以该像素点的像素值替换该背景图层图像像素值；若深度相同，则将所述深度最深像素点的像素值与原背景图层图像像素值加权平均后替换背景图层图像像素值；若深度更浅，则将所述深度最深像素点放回待分配像素集。

4.根据权利要求3所述的编码方法，其特征在于，所述建立前景图层图像的方法包括：

针对每个像素点，取出所述待分配像素集中深度最小的像素点的像素值，若该像素点已无像素值，则置空或置为该位置背景图层像素值，构成前景图层图像。

5.根据权利要求4所述的编码方法，其特征在于，所述建立前景图层图像的方法进一步包括：

利用所述运动信息对待分配像素集中的所有像素点进行对象分割，并利用深度信息进行对象范围修正，再以对象为单位从待分配像素集中取出像素值。

6.根据权利要求4所述的编码方法，其特征在于，所述编码方法在对各图层进行编码时，对不属于该图层的区域不做编码或采用跳过模式编码；且

在生成背景图层的参考帧时，对每个像素位置，若在本图层重建图像对应位置存在重建像素时，取值为该重建像素值与前一参考帧对应位置像素值的加权平均值；否则取值为前一参考帧对应位置的像素值；

在生成各个前景图层的参考帧时，对每个像素位置，若在本图层重建图像对应位置存在重建像素时，取值为该重建像素值；否则取值为背景图层参考帧对应位置的像素值。

7.一种基于权利要求1所述编码方法的三维视频解码方法，其特征在于，包括：

获取待解码的输入码流；

对所述输入码流解析并熵解码，获取编码信息；

依次对背景图层图像及前景图层图像进行解码，得到各图层的重建图像，并生成各图层的参考图像；

根据所述各图层的重建图像和摄像机参数，生成指定视点的输出图像。

8.一种三维视频的编码装置，其特征在于，包括：

视频输入单元，用于实现视频信号的采集或读入；

图层分解单元，用于将输入视频中的图像分解成前景图层图像和背景图层图像；

图层编码单元，用于基于各图层的重建图像对所述前景图层图像和背景图层图像进行编码；

图层重建图像生成单元，用于生成对应图层的一整幅的重建图像；

码流形成单元，用于将图层编码单元生成的数据组合成一个符合语法规则的码流；

码流输出单元，用于实现对所述码流的输出。