[发明专利]基于单应性变换的视频融合方法、系统、终端及介质

说明书

本发明提供基于单应性变换的视频融合方法、系统、终端及介质，其根据单应性变换的物理模型，将多个有重叠区域的监控摄像头画面融合成一个画面，便于更加直观形象的观察分析现场情况。通过视频流解码取帧，标记点预处理，单应性变换求解，视频融合和融合结果后处理的过程，其中在视频融合过程中更是引入了映射图像，大大提升了视频融合的效率，降低了视频融合的计算量，从而为实时性提供强有力的保证。

技术领域

本发明涉及视觉技术领域，特别是涉及基于单应性变换的视频融合方法、系统、终端及介质。

背景技术

视频监控可以让人在远程实时掌握并记录现场情况，为各项生产生活带来方便。在生产方面，视频监控能在一些较为恶劣的环境下，代替人力进行监视控制，由于监控系统体积小，工作稳定，且不会产生人出现的视觉疲劳等生理缺陷，所以正常情况下能够监控保证生产安全；在治安方面，将视频监控系统安装在超市、银行、厂房、施工地点等，可以及时了解室内情况和顾客行为，有效保障消费者或者工人的权益，监控厂房运行情况，提高社会安全保障水平；在交通监控方面，视频监控系统及时准确且监控范围广，可以保证在交通堵塞或者事故中第一时间通知交警。

但是，目前的视频监控系统在后台视频观看分析方面仍然是独立的每个摄像头对应一个画面，若用户想追踪某个视频现场，尤其是路口的移动路径，须在不同的摄像头画面之间做切换操作，这给后台工作人员的观察分析带来极大的不便。

发明内容

鉴于以上所述现有技术的缺点，本发明的目的在于提供基于单应性变换的视频融合方法、系统、终端及介质，用于解决现有技术中多视频的处理须在不同的摄像头画面之间做切换操作，这给后台工作人员的观察分析带来极大的不便的问题。

为实现上述目的及其他相关目的，本发明提供一种基于单应性变换的视频融合方法，其包括：对多个待融合视频流分别进行解码和取帧操作；以一待融合视频流的帧图像为基准图像，并对其它待融合视频流的帧图像对应于所述基准图像进行对应点标记；构造一拓宽于所述基准图像且画面尺寸与最终融合图像的尺寸相一致的映射图像，并基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据；根据所述映射图像中每个像素的像素数据生成所述最终融合图像。

于本发明的一实施例中，构造一拓宽于基准图像且画面尺寸与最终融合图像的尺寸相一致的映射图像，其方式包括：获取所述基准图像的长度数据length和宽度数据width；沿所述基准图像四周拓宽预设长度edge，以生成长度为(length+2×edge)且宽度为(width+2×edge)的映射图像。

于本发明的一实施例中，基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据，其方式包括：将所述基准图像中心对位地置于所述映射图像中；根据所述对应点标记信息计算各帧图像对应的单应性矩阵，并根据所述单应性矩阵计算所述映射图像中的像素点在原始图像中的像素数据；所述像素数据包括：原始图像索引数据、位置数据以及RGB数据。

于本发明的一实施例中，所述方法包括：所述位置数据根据下式求解：

其中，

于本发明的一实施例中，根据所述映射图像中每个像素的像素数据生成所述最终融合图像，其方式包括：根据所述映射图像中每个像素的像素数据，查得所述最终融合图像中各目标像素的位置数据和RGB数据；根据查询结果信息构建最终输出的融合图像。