[发明专利]立体视频编码过程的多视点视频和深度图的码率分配方法

权利要求书

1.一种立体视频编码过程中的多视点视频和深度图的码率分配方法，其特征在于，包括：

(1)根据立体视频传输过程中的码率限制值，设定立体视频待编码的当前多视点视频帧的初始码率和当前深度图的初始码率，并设定一个当前虚拟视点图像绘制失真的优化值；

(2)根据所述当前多视点视频帧的初始码率，计算所述当前多视点视频帧的编码量化步长，并根据所述当前多视点视频帧的编码量化步长计算所述当前多视点视频帧的编码量化参数，根据所述当前深度图的初始码率，计算所述当前深度图的编码量化步长，并根据所述当前深度图的编码量化步长计算所述当前深度图的编码量化参数；

(3)根据所述当前多视点视频帧的编码量化参数和所述当前深度图的编码量化参数，预测所述各个视点的当前视频帧和当前深度图的编码量化失真；

(4)根据所述当前各个视点视频帧的编码量化失真和对应视点的当前深度图的编码量化失真，计算当前虚拟视点图像绘制失真；

(5)判断所述当前虚拟视点图像绘制失真是否小于当前虚拟视点图像绘制失真的优化值，如果是则将所述当前虚拟视点图像绘制失真设置为所述当前虚拟视点图像绘制失真的优化值，将所述当前深度图的编码量化参数增加预设值，重新计算深度图编码码率，并根据传输带宽限制调整多视点视频编码码率，重新计算当前多视点视频帧的编码量化参数，并返回步骤(3)，否则根据所述当前虚拟视点图像绘制失真的优化值对应的多视点视频帧的编码量化参数和当前深度图的编码量化参数，计算得到所述当前多视点视频帧的优化码率和所述当前深度图的优化码率；以及

(6)对立体视频待编码的其他多视点视频帧和深度图，按照步骤(1)-(5)所述的方法，计算得到所述其他多视点视频帧的优化码率和所述其他深度图的优化码率，实现码率优化分配。

2.根据权利要求1所述的多视点视频和深度图的码率分配方法，其特征在于，所述立体视频的视点个数为两个。

3.根据权利要求1所述的多视点视频和深度图的码率分配方法，其特征在于，所述步骤(5)在将所述当前深度图的编码量化参数增加预设值并返回步骤(3)时，所述预设值设定为1。

4.根据权利要求1所述的多视点视频和深度图的码率分配方法，其特征在于，所述步骤(1)进一步包括：

根据所述立体视频待编码的当前多视点视频帧和当前深度图各自的编码码率范围，设定所述立体视频待编码的当前多视点视频帧的初始码率和当前深度图的初始码率。

5.根据权利要求1所述的多视点视频和深度图的码率分配方法，其特征在于，所述步骤(4)进一步包括：

根据所述每个视点的当前视频帧编码量化失真，计算每个视点的当前视频帧量化引入失真；

根据所述每个视点的当前深度图编码量化失真，计算每个视点的当前深度图量化引入失真；以及

根据所述每个视点的当前视频帧量化引入失真和当前深度图量化引入失真，计算所述当前虚拟视点图像绘制失真。

6.根据权利要求5所述的多视点视频和深度图的码率分配方法，其特征在于，所述两个视点分别为左参考视点和右参考视点，所述步骤(4)进一步包括：

根据所述左参考视点的当前视频帧编码量化失真，计算所述左参考视点的当前视频帧量化引入失真，根据所述左参考视点的当前深度图编码量化失真，计算所述左参考视点的当前深度图量化引入失真；

根据所述右参考视点的当前视频帧编码量化失真，计算所述右参考视点的当前视频帧量化引入失真，根据所述右参考视点的当前深度图编码量化失真，计算所述右参考视点的当前深度图量化引入失真；以及

根据所述左参考视点的当前视频帧量化引入失真和当前深度图量化引入失真、所述右参考视点的当前视频帧量化引入失真和当前深度图量化引入失真，通过公式Eiw=wa×pau×(Ea,it+Ea,id)+wb×pbu×(Eb,it+Eb,id)]]>计算得到所述当前虚拟视点图像绘制失真，其中，代表所述当前虚拟视点图像绘制失真，代表所述左参考视点的当前视频帧量化引入失真，代表所述左参考视点的当前深度图量化引入失真，代表所述右参考视点的当前视频帧量化引入失真，代表所述右参考视点当前深度图量化引入失真，w_a代表所述左参考视点加权系数，w_b代表所述右参考视点加权系数，和分别代表左右参考视点绘制虚拟视点时的非遮挡像素占全部画面像素的比例。