[发明专利]自动跟踪抠像区系统

权利要求书

1.一种方法，所述方法包括：

在来自现实活动摄像机的现实活动图像的2D显示中产生围绕将被去除或保留的物体的轮廓线；

将由所述2D轮廓线定义的形状转换成3D网格，其中所述转换包括去除镜头畸变；

从具有与所述现实活动摄像机相同位置和定向的虚拟摄像机投射所述3D网格；

根据所述3D网格创建2D去畸变的抠像区形状；

使所述2D去畸变的抠像区形状产生畸变以匹配所拍摄的畸变的现实活动图像；以及

使用所述2D畸变的抠像区形状处理所述现实活动图像的部分连同其他的图像来形成合成图像。

2.一种方法，所述方法包括：

在来自现实活动摄像机的现实活动图像的2D显示中产生围绕将被去除或保留的物体的轮廓线；

将由所述2D轮廓线定义的形状转换成3D网格；

从具有与所述现实活动摄像机相同位置和定向的虚拟摄像机投射所述3D网格；

根据所述3D网格创建2D去畸变的抠像区形状；以及

使用所述2D去畸变的抠像区形状处理所述现实活动图像的部分连同其他的图像来形成合成图像。

3.如权利要求2所述的方法，其中所述转换包括去除镜头畸变。

4.如权利要求2所述的方法，其中所述处理包括使所述2D去畸变的抠像区形状产生畸变以匹配所拍摄的畸变的现实活动图像。

5.如权利要求2所述的方法，其中所述用户界面自动控制对用户选择的轮廓线点中的点的畸变处理。

6.如权利要求2所述的方法，其中在几何形状被首次创建时的所述摄像机所面对的法线方向被保存在所述系统中，使得即使在所述摄像机移动之后，也可以对抠像区大小和3D位置进行调整同时保持所述轮廓线与现实的活动物体的正确匹配。

7.如权利要求2所述的方法，其中轮廓线产生步骤包括通过在2D界面拖动3D点来编辑所述3D点，同时将其位置保持在其原始的2D平面上。

8.如权利要求2所述的方法，其中所述方法包括实时地去畸变和重新产生畸变，从而创建正确匹配的几何形状。

9.一种视频处理系统，所述视频处理系统包括：

畸变去除处理器，其被编程为创建去畸变的点的集合；

2D至3D转换器，其被配置成使用所述去畸变的点的集合来计算3D抠像区几何形状；

3D渲染器，其被配置成使用所述3D抠像区几何形状来产生2D去畸变的抠像区形状；

畸变添加处理器，其被编程为使用所述2D去畸变的抠像区形状来创建畸变的2D抠像区形状；以及

2D合成器，其被配置成使用所述畸变的2D抠像区形状来将现实活动图像的至少一部分与至少一个其他的图像进行合并以产生合成的图像。

10.如权利要求9所述的视频处理系统，其中所述畸变去除处理器使用摄像机和镜头数据来创建所述去畸变的点的集合。

11.如权利要求9所述的视频处理系统，其中所述2D至3D转换器使用镜头数据来创建所述畸变的2D抠像区形状。

12.如权利要求9所述的视频处理系统，其中所述3D渲染器使用摄像机和镜头数据来产生所述去畸变的抠像区形状。

13.如权利要求9所述的视频处理系统，其中所述畸变去除处理器、所述3D渲染器和所述2D至3D转换器全部被配置成接收根据来自摄像机跟踪系统的摄像机数据和来自镜头校准表的镜头数据合并的合并数据。

14.如权利要求9所述的视频处理系统，其中所述3D渲染器被配置成接收背景场景几何形状并产生未产生畸变的背景图像，并且其中所述畸变添加处理器被编程为接收所述未产生畸变的背景图像并产生用于传送到所述2D合成器的背景图像。

15.一种系统，所述系统包括：

视频处理器，其被配置成将抠像区形状转换成3D空间坐标，并利用与现实活动摄像机和镜头匹配的镜头和摄像机数据重新绘制，以及使用所述抠像区形状来选择性地处理现实活动图像的部分以结合至少一个其他图像来产生合成的图像。

16.如权利要求15所述的系统，其中所述至少一个其他图像是利用与现实活动前景相同的摄像机视角创建的虚拟背景。