[发明专利]图像空洞的填补方法和装置及视频图像的处理方法和装置

权利要求书

1.一种图像空洞的填补方法，其特征在于，包括：

获取视频图像和所述视频图像的三维空间信息；

根据所述三维空间信息确定所述视频图像的各个像素点的视差值；

将所述视差值乘以预设常数得到虚拟视点图像中各个虚拟视点的位置信息，其中，所述虚拟视点图像为所述视频图像对应的虚拟视点图像；

根据所述预设常数确定绘制所述虚拟视点图像的方向；

按照确定的方向从所述三维空间信息中读取各个像素点的像素值和与所述各个像素点对应的虚拟视点的位置信息，并在读取过程中绘制所述虚拟视点图像；以及

在所述虚拟视点图像出现空洞时，根据读取到的像素点的像素值填补所述空洞。

2.根据权利要求1所述的填补方法，其特征在于，根据所述预设常数确定绘制所述虚拟视点图像的方向包括：

比较所述预设常数与零的大小；

若所述预设常数大于零，则确定绘制所述虚拟视点图像的方向为第一方向，其中，所述第一方向为从接收到的所述三维空间信息的起始数据至接收到的所述三维空间信息的终止数据的方向；以及

若所述预设常数小于零，则确定绘制所述虚拟视点图像的方向为第二方向，其中，所述第二方向为从所述终止数据至所述起始数据的方向。

3.根据权利要求2所述的填补方法，其特征在于，在所述虚拟视点图像出现空洞时，根据读取到的像素点的像素值填补所述空洞包括：

获取读取到的像素点中的第一类像素点，其中，所述第一类像素点中各个像素点的深度值均小于预设深度值；以及

利用所述第一类像素点中各个像素点的像素值填补所述空洞。

4.根据权利要求3所述的填补方法，其特征在于，获取读取到的像素点中的第一类像素点包括：获取读取到的像素点中预设区域内的所述第一类像素点。

5.根据权利要求3或4所述的填补方法，其特征在于，利用所述第一类像素点中各个像素点的像素值填补所述空洞包括：

计算所述第一类像素点中各个像素点的像素值的方差；

判断所述方差是否小于或等于预设值；

若判定所述方差小于或等于所述预设值，则对所述第一类像素点中各个像素点的像素值进行中值滤波得到第一像素值，并确定所述第一像素值为所述空洞的像素值；以及

若判定所述方差大于所述预设值，则对所述第一类像素点中各个像素点的像素值进行图像修复得到第二像素值，并确定所述第二像素值为所述空洞的像素值。

6.根据权利要求4所述的填补方法，其特征在于，所述预设区域为矩形区域。

7.一种视频图像的处理方法，其特征在于，包括：

通过权利要求1至6中任一项所述的图像空洞的填补方法获取视频图像的虚拟视点图像；

对所述虚拟视点图像进行上采样；

对上采样后的所述虚拟视点图像进行滤波；

对滤波后的所述虚拟视点图像进行下采样，以得到与所述视频图像同分辨率的虚拟视频图像；以及

根据所述视频图像和所述虚拟视频图像确定双目立体视频图像。

8.一种图像空洞的填补装置，其特征在于，包括：

获取单元，用于获取视频图像和所述视频图像的三维空间信息；

第一确定单元，用于根据所述三维空间信息确定所述视频图像的各个像素点的视差值；

计算单元，用于将所述视差值乘以预设常数得到虚拟视点图像中各个虚拟视点的位置信息，其中，所述虚拟视点图像为所述视频图像对应的虚拟视点图像；

第二确定单元，用于根据所述预设常数确定绘制所述虚拟视点图像的方向；

读取单元，用于按照确定的方向从所述三维空间信息中读取各个像素点的像素值和与所述各个像素点对应的虚拟视点的位置信息，并在读取过程中绘制所述虚拟视点图像；以及

填补单元，用于在所述虚拟视点图像出现空洞时，根据读取到的像素点的像素值填补所述空洞。