[发明专利]一种全景视频融合方法及装置

说明书

本发明涉及图像处理技术领域，尤其涉及一种全景视频融合方法及装置，用以解决采用拼接方式形成的全景视频图像中全景视频图像不完整的问题。获取全景视频图像，该全景视频图像根据至少两个长方体三维图像拼接形成；从所述至少两个长方体三维图像中提取运动目标；对全景视频图像和运动目标进行图像融合处理，形成融合有运动目标的全景视频图像。从而，避免了采用长方体三维模型生成的全景视频图像中运动目标全部或部分消失以及重叠等问题，保证了全景视频图像的完整性，提升了全景视频图像的品质。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种全景视频融合方法及装置。

背景技术

随着图像处理技术的快速发展，全景视频越来越多的应用在各个领域。全景视频图像是利用摄像头从不同角度对预设场景进行拍摄，之后将拍摄得到的视频图像进行拼接，形成该预设场景的全景视频图像。全景视频图像可以让观赏者通过一幅视频图像方便地浏览该预设场景的全部角度的场景。

由于将多个视频图像拼接生成全景视频图像，需要利用长方体三维模型先将多个视频图像转化为多个长方体三维图像，在拼接这些长方体三维图像时，相邻长方体三维图像的拼接贴合面会被裁减掉，因此，拼接贴合面上的图像也会被裁减掉，这样，融合后的全景视频图像中，运动目标移动到拼接贴合面时的图像被裁减掉了，进而导致运动目标在经过拼接处时或者到达拼接处附近时消失。

具体地，参照图1所示，为相关技术中运动目标显示异常的简单示意图；该图1中，简单示出具有一定高度的人形作为运动目标，该运动目标由左至右在预设场景(该预设场景包含鱼眼1号和鱼眼1号分别所在的两个局部空间)中行走，当运动目标行走至A点，鱼眼1号和鱼眼2号分别采集相应的视频图像，虚线表示从各自鱼眼摄像头所在位置获取运动目标的采集视线的边界，此时通过进一步分析可知，在鱼眼1号的采集视线中，运动目标的投影均位于地板上，如图中黑色粗线段表示；在鱼眼2号的采集视线中，运动目标的投影均位于拼接处上，如图中黑色粗线段表示。当运动目标行走至B点，在鱼眼1号的采集视线中，运动目标的投影部分位于地板上，部分位于拼接处，如图中黑色粗线段表示；在鱼眼2号的采集视线中，运动目标的投影位于拼接处，如图中黑色粗线段表示。由此可知，在将两个局部空间的视频图像进行拼接时，拼接处的视频图像会被剪裁掉，从而，导致位于预设拼接区域的运动目标消失，使得生成的全景视频图像不完整。

发明内容

本申请实施例提供一种全景视频融合方法，用以解决采用拼接方式形成的全景视频图像中全景视频图像不完整的问题。

本申请实施例还提供一种全景视频融合装置，用以解决采用拼接方式形成的全景视频图像中全景视频图像不完整的问题。

本申请实施例采用下述技术方案：

一种全景视频融合方法，包括：

获取全景视频图像，其中，所述全景视频图像根据至少两个长方体三维图像拼接形成；

从所述至少两个长方体三维图像中提取运动目标；

对所述全景视频图像和所述运动目标进行图像融合处理，形成融合有运动目标的全景视频图像。

通过上述技术方案，针对采用长方体三维模型生成的全景视频图像，从生成全景视频图像时采用的长方体三维图像中提取运动目标，之后，将该运动目标融合到全景视频图像中，从而，避免了由于采用长方体三维模型生成的全景视频图像而导致运动目标显示异常的问题，保证了全景视频图像的画面完整性。

可选地，从所述至少两个长方体三维图像中提取运动目标，具体包括：

当检测到所述全景视频图像中有运动目标在拼接区域显示异常时，从所述至少两个长方体三维图像中提取所述运动目标。

通过该方案可以针对性地提取存在异常的运动目标，而不对正常显示的运动目标进行额外处理，提升了提取的效率及准确性，且降低了提取的繁琐性。