[发明专利]用于视频中物体检测的图像处理方法、装置及设备有效
申请号: | 201711058846.0 | 申请日: | 2017-11-01 |
公开(公告)号: | CN108876812B | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 赵子健;俞刚;黎泽明 | 申请(专利权)人: | 北京旷视科技有限公司;北京迈格威科技有限公司 |
主分类号: | G06T7/246 | 分类号: | G06T7/246;G06T7/32;G06T7/33;G06T7/38 |
代理公司: | 北京市磐华律师事务所 11336 | 代理人: | 高伟;刘爱平 |
地址: | 100190 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 视频 物体 检测 图像 处理 方法 装置 设备 | ||
1.一种用于视频中物体检测的图像处理方法,其特征在于,包括:
提取所述视频中的第一帧图像的第一特征图,并提取所述视频中的第二帧图像的第二特征图,其中,所述第二帧图像位于所述第一帧图像之后且所述第二帧图像与所述第一帧图像之间具有预定间隔,所述预定间隔之间包括至少一帧图像;
获取所述第一特征图的第(w1, h1)个空间位置的第一特征向量;
在所述第二特征图的预设范围内,确定与所述第一特征图的第(w1, h1)个空间位置匹配的第一空间位置,其中,所述第一空间位置的第二特征向量与所述第一特征向量的相关性最大;
确定所述第一空间位置与所述第一特征图的第(w1, h1)个空间位置之间的偏移量,作为相关性匹配的结果;
其中,所述第一特征图的空间维度为W×H,w1的取值范围为1至W,h1的取值范围为1至H;
根据所述相关性匹配的结果构建所述第二帧图像之后的第三帧图像的第三特征图;其中,所述第三帧图像与所述第二帧图像之间具有所述预定间隔。
2.根据权利要求1所述的方法,其特征在于,所述预设范围为所述第二特征图的空间位置(i1, j1)的范围,其中,w1-b ≤ i1 ≤ w1+b,h1-b ≤ j1 ≤ h1+b,b为预设带宽。
3.根据权利要求2所述的方法,其特征在于,所述第一空间位置为所述第二特征图的第(w1+im, h1+jm)个空间位置,则所述偏移量为(im, jm),其中,im和jm均为-b至b之间的整数。
4.根据权利要求1所述的方法,其特征在于,所述根据所述相关性匹配的结果构建所述第三特征图,包括:
根据所述第二特征向量和所述偏移量,构建所述第三帧图像的所述第三特征图,其中,所述第三特征图的第二空间位置具有所述第二特征向量,所述第二空间位置与所述第一空间位置之间具有所述偏移量。
5.根据权利要求1所述的方法,其特征在于,通过计算两个特征向量之间的夹角余弦值或通过计算两个特征向量之间的距离来计算相关性。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述预定间隔是根据所述视频中物体的运动速度而设定的。
7.一种用于视频中物体检测的图像处理装置,其特征在于,所述装置用于实现前述权利要求1至6中任一项所述的方法,所述装置包括:
特征提取模块,用于提取所述视频中的第一帧图像的第一特征图,并提取所述视频中的第二帧图像的第二特征图,其中,所述第二帧图像位于所述第一帧图像之后且所述第二帧图像与所述第一帧图像之间具有预定间隔,所述预定间隔之间包括至少一帧图像;
特征图传播模块,用于根据所述第一特征图和所述第二特征图,构建所述第二帧图像之后的第三帧图像的第三特征图,其中,所述第三帧图像与所述第二帧图像之间具有所述预定间隔;
所述特征图传播模块包括匹配子模块和构建子模块,所述匹配子模块用于以所述第一特征图为基础,将所述第二特征图与所述第一特征图进行相关性匹配,构建子模块用于根据所述相关性匹配的结果构建所述第三特征图;
所述匹配子模块用于获取所述第一特征图的第(w1, h1)个空间位置的第一特征向量;
在所述第二特征图的预设范围内,确定与所述第一特征图的第(w1, h1)个空间位置匹配的第一空间位置,其中,所述第一空间位置的第二特征向量与所述第一特征向量的相关性最大;
确定所述第一空间位置与所述第一特征图的第(w1, h1)个空间位置之间的偏移量;
其中,所述第一特征图的空间维度为W×H,w1的取值范围为1至W,h1的取值范围为1至H。
8.一种图像处理设备,包括存储器、处理器及存储在所述存储器上且在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
9.一种计算机存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京旷视科技有限公司;北京迈格威科技有限公司,未经北京旷视科技有限公司;北京迈格威科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711058846.0/1.html,转载请声明来源钻瓜专利网。