[发明专利]一种基于3D-HEVC框架的深度视频错误隐藏方法

说明书

本发明涉及一种基于3D‑HEVC框架的深度视频错误隐藏方法。目前还缺乏在错误发生在深度图的情况下，通过错误隐藏方法改进图像最终质量的有效方法。本发明方法先把深度图中各64×64大小的编码单元块进行分类，划分成静止块和运动块，然后对静止块采用从参考帧直接拷贝同位块进行错误隐藏，对运动块采用矢量补偿的方法进行错误隐藏，最后对错误隐藏后性能不佳的错误修复块进行进一步性能优化。矢量补偿方法具体是：首先构建运动共享矢量、空域矢量集，然后计算全局视差矢量集，重建丢失块，最后计算外边界匹配度。本发明方法结合了新标准的特性并改进了已有错误隐藏方法，对立体视频在网络传输中发生的网络丢包现象有很好的恢复效果。

技术领域

本发明属于视频编解码技术领域，具体涉及一种基于3D-HEVC的面向深度图传输出错的错误隐藏方法。

背景技术

错误隐藏是针对视频在网络传输过程中进行开展的。由于传输环境恶劣或是网络传输中断等传输不良因素导致，在传输过程中有可能发生传输信息丢包。错误隐藏是在发生传输信息丢包情况下不进行网络重传机制时运用到的技术。

MVD格式视频中，不仅要考虑到纹理图发生的传输错误，还要考虑到深度图发生传输错误，深度图在MVD格式进行虚拟视点合成时有着重要的作用，不准确的深度图会使虚拟视点的绘制效果出现模糊重影等失真，进而影响整个3D视频的体验。为了有更好的3D视频体验，我们要将纹理图与深度图视为同等重要的因素。

发明内容

本发明的目的是研究在错误发生在深度图的情况下，如何利用有效的错误隐藏方法改进图像最终质量，提供一种基于3D-HEVC框架下深度图视频序列的错误隐藏方法。

本发明方法的具体步骤如下：

步骤(1).根据图像丢失块像素点的坐标，获取前向参考帧中的同位块B₁和后向参考帧中的同位块B₂，同位块大小为64×64。

步骤(2).取两个同位块B₁和B₂像素均值的差值绝对值,当平均像素差Th大于阈值1，即判断当前丢失块为运动块，反之则判断为静止块。

如果判断丢失块的类型为静止块，采用将前向参考帧中的同位块或后向参考帧中的同位块信息来填补图像中的当前丢失块进行恢复；

如果判断丢失块的类型为运动块，采用基于矢量补偿的方法进行恢复；再对最终恢复性能较差的丢失块进行质量再提升。

基于矢量补偿的方法恢复的具体步骤是：

步骤(a).构建运动共享矢量：

将纹理图中同位块的可用运动矢量缩放后，加入待选矢量集；

若对应的同位块为帧内编码块，则取周围邻块不为0运动矢量的平均值作为当前待选运动矢量；

缩放计算方法：MV_texture为最终优化后的运动矢量，MV_t为纹理图中直接获取到的运动矢量，R为缩放比例。

步骤(b).构建空域矢量集：

选择大小为4×4的左下块0、左块1、左上块2、上块3、右上块4和下块5的运动/视差矢量来构建空域矢量集，其对应位移矢量集为{SV₀,SV₁,SV₂,SV₃,SV₄,SV₅}；如果上述待选块中发生丢失，则放弃该块的运动矢量信息。

步骤(c).全局视差矢量：

全局视差矢量值DV_g计算方法：其中N是大小为8×8且存在视差矢量的块的数量，DV_i是第i个为8×8块的视差矢量值；