[发明专利]自由视点电视中的虚拟视点合成方法

摘要

本发明提出一种新的基于深度图渲染技术的虚拟视点合成的方法。首先，通过3D图像变换获得虚拟视点深度图像，对该深度图像进行优化处理；然后根据优化处理得到的深度图进行逆向3D图像变换，获得虚拟视点彩色图像；最后通过基于深度信息的图像修复算法进行空洞填充。通过逆向3D图像变换，可以避免虚拟视点彩色图像上出现裂纹，提高虚拟视点图像的质量；另外，针对虚拟视点图像中的非遮挡空洞区域，采用本发明提出的图像修复的方法进行填充，可以保证渲染出的图像产生最佳的显示效果。

主权项

一种基于深度图的视点合成方法，其具体步骤如下：（1）3D图像变换：根据摄像机投影原理，通过3D图像变换，将参考视点的深度图投影到虚拟视点上，获得虚拟视点深度图像；（2）虚拟视点深度图像的优化处理：通过形态学图像处理，优化虚拟视点深度图像；（3）逆向3D图像变换：根据优化后的虚拟视点深度图像，进行逆向3D图像变换，对于虚拟视点图像中的所有像素，找到其在参考视点图像中的对应点，并进行像素彩色信息的赋值，从而获得虚拟视点彩色图像；（4）空洞填充：利用图像修复技术对上述步骤得到的虚拟视点彩色图像中的空洞进行填充。