[发明专利]基于单应性变换的视频融合方法、系统、终端及介质在审
申请号: | 201811268133.1 | 申请日: | 2018-10-29 |
公开(公告)号: | CN111107307A | 公开(公告)日: | 2020-05-05 |
发明(设计)人: | 陆杰 | 申请(专利权)人: | 曜科智能科技(上海)有限公司 |
主分类号: | H04N7/18 | 分类号: | H04N7/18;H04N5/265 |
代理公司: | 上海光华专利事务所(普通合伙) 31219 | 代理人: | 高彦 |
地址: | 201203 上海市浦东新区中*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 单应性 变换 视频 融合 方法 系统 终端 介质 | ||
1.一种基于单应性变换的视频融合方法,其特征在于,包括:
对多个待融合视频流分别进行解码和取帧操作;
以一待融合视频流的帧图像为基准图像,并对其它待融合视频流的帧图像对应于所述基准图像进行对应点标记;
构造一拓宽于所述基准图像且画面尺寸与最终融合图像的尺寸相一致的映射图像,并基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据;
根据所述映射图像中每个像素的像素数据生成所述最终融合图像。
2.根据权利要求1所述的基于单应性变换的视频融合方法,其特征在于,构造一拓宽于基准图像且画面尺寸与最终融合图像的尺寸相一致的映射图像,其方式包括:
获取所述基准图像的长度数据length和宽度数据width;
沿所述基准图像四周拓宽预设长度edge,以生成长度为(length+2×edge)且宽度为(width+2×edge)的映射图像。
3.根据权利要求1所述的基于单应性变换的视频融合方法,其特征在于,基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据,其方式包括:
将所述基准图像中心对位地置于所述映射图像中;
根据所述对应点标记信息计算各帧图像对应的单应性矩阵,并根据所述单应性矩阵计算所述映射图像中的像素点在原始图像中的像素数据;所述像素数据包括:原始图像索引数据、位置数据以及RGB数据。
4.根据权利要求3所述的基于单应性变换的视频融合方法,其特征在于,包括:
所述位置数据根据下式求解:
其中,
5.根据权利要求1所述的基于单应性变换的视频融合方法,其特征在于,根据所述映射图像中每个像素的像素数据生成所述最终融合图像,其方式包括:
根据所述映射图像中每个像素的像素数据,查得所述最终融合图像中各目标像素的位置数据和RGB数据;
根据查询结果信息构建最终输出的融合图像。
6.一种基于单应性变换的视频融合系统,其特征在于,包括:
解码取帧模块,用于对多个待融合视频流分别进行解码和取帧操作;
对应点标记模块,用于以一待融合视频流的帧图像为基准图像并对其它待融合视频流的帧图像对应于所述基准图像进行对应点标记;
映射图像构造模块,用于构造一拓宽于所述基准图像且画面尺寸与最终融合图像的尺寸相一致的映射图像,并基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据;
融合图像生成模块,用于根据所述映射图像中每个像素的像素数据生成所述最终融合图像。
7.根据权利要求6所述的基于单应性变换的视频融合系统,其特征在于,所述映射图像构造模块构造所述映射图像的方式包括:
获取所述基准图像的长度数据length和宽度数据width;
沿所述基准图像四周拓宽预设长度edge,以生成长度为(length+2×edge)且宽度为(width+2×edge)的映射图像。
8.根据权利要求6所述的基于单应性变换的视频融合系统,其特征在于,所述映射图像构造模块基于对应点标记信息以及单应性变换关系计算所述映射图像中每个像素对应于原始帧图像的像素数据,其方式包括:
将所述基准图像中心对位地置于所述映射图像中;
根据所述对应点标记信息计算各帧图像对应的单应性矩阵,并根据所述单应性矩阵计算所述映射图像中的像素点在原始图像中的像素数据;所述像素数据包括:原始图像索引数据、位置数据以及RGB数据。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的基于单应性变换的视频融合方法。
10.一种电子终端,其特征在于,包括:处理器及存储器;
所述存储器用于存储计算机程序,所述处理器用于执行所述存储器存储的计算机程序,以使所述终端执行如权利要求1至5中任一项所述的基于单应性变换的视频融合方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于曜科智能科技(上海)有限公司,未经曜科智能科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811268133.1/1.html,转载请声明来源钻瓜专利网。