[发明专利]视频帧处理方法、装置、计算机设备及存储介质在审
| 申请号: | 202110579947.2 | 申请日: | 2021-05-26 |
| 公开(公告)号: | CN113313011A | 公开(公告)日: | 2021-08-27 |
| 发明(设计)人: | 陈龙泉;刘余钱 | 申请(专利权)人: | 上海商汤临港智能科技有限公司 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京中知恒瑞知识产权代理事务所(普通合伙) 11889 | 代理人: | 吴迪 |
| 地址: | 200232 上海市浦东新区中国(上海)自由贸易*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 处理 方法 装置 计算机 设备 存储 介质 | ||
1.一种视频帧处理方法,其特征在于,包括:
获取当前视频帧和在当前视频帧之前的目标视频帧分别对应的目标检测结果,所述目标检测结果用于表示至少一个目标对象在视频帧中的位置信息;
基于所述当前视频帧对应的目标检测结果,以及所述当前视频帧与所述目标视频帧对应的帧间位移,确定所述当前视频帧中的所述目标对象在所述目标视频帧中对应的目标极线;所述目标极线用于表示所述目标对象在所述目标视频帧中的预测位置,所述帧间位移用于表示拍摄所述当前视频帧和所述目标视频帧时的图像采集设备的位姿变化情况;
基于所述目标视频帧的目标检测结果以及所述目标极线,确定所述当前视频帧与所述目标视频帧中是否包含同一所述目标对象。
2.根据权利要求1所述的方法,其特征在于,所述获取当前视频帧和在当前视频帧之前的目标视频帧分别对应的目标检测结果,包括:
将所述当前视频帧和所述目标视频帧分别输入至预先训练的神经网络中,得到所述当前视频帧和所述目标视频帧分别对应的目标检测结果。
3.根据权利要求1或2所述的方法,其特征在于,所述目标检测结果包括所述目标对象对应的检测框;
所述基于所述当前视频帧对应的目标检测结果,以及所述当前视频帧与所述目标视频帧对应的帧间位移,确定所述当前视频帧中的所述目标对象在所述目标视频帧中对应的目标极线,包括:
基于所述帧间位移和预设深度范围,将所述当前视频帧对应的目标对象的检测框的中心投影至所述目标视频帧,确定所述目标极线。
4.根据权利要求1~3任一所述的方法,其特征在于,所述目标检测结果包括所述目标对象对应的检测框;
所述基于所述目标视频帧的目标检测结果以及所述目标极线,确定所述当前视频帧与所述目标视频帧中是否包含同一所述目标对象,包括:
确定所述目标对象在所述目标视频帧中对应的候选检测框;
检测所述候选检测框的位置信息,以及所述目标极线在所述目标视频帧中的位置信息是否满足预设条件;
若是,则确定所述目标视频帧中满足预设条件的所述候选检测框对应的目标对象与所述目标极线在所述当前视频帧中对应的目标对象为同一目标对象;
若否,则返回重新确定所述当前视频帧对应的目标视频帧。
5.根据权利要求4所述的方法,其特征在于,所述目标视频帧为当前视频帧之前的第N帧视频帧;
所述重新确定所述当前视频帧对应的目标视频帧,包括:
将所述当前视频帧之前的第N+t帧视频帧作为重新确定的目标视频帧,所述N+t为小于M的正整数,M和t为预设值,N、t为正整数。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定同一目标对象所在的多帧视频帧;
基于采集所述多帧视频帧的图像采集设备的位置信息,确定所述同一目标对象的位置信息;
基于所述目标对象的位置信息构建地图。
7.一种视频帧处理装置,其特征在于,包括:
获取模块,用于获取当前视频帧和在当前视频帧之前的目标视频帧分别对应的目标检测结果,所述目标检测结果用于表示至少一个目标对象在视频帧中的位置信息;
第一确定模块,用于基于所述当前视频帧对应的目标检测结果,以及所述当前视频帧与所述目标视频帧对应的帧间位移,确定所述当前视频帧中的所述目标对象在所述目标视频帧中对应的目标极线;所述目标极线用于表示所述目标对象在所述目标视频帧中的预测位置,所述帧间位移用于表示拍摄所述当前视频帧和所述目标视频帧时的图像采集设备的位姿变化情况;
第二确定模块,用于基于所述目标视频帧的目标检测结果以及所述目标极线,确定所述当前视频帧与所述目标视频帧中是否包含同一所述目标对象。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤临港智能科技有限公司,未经上海商汤临港智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110579947.2/1.html,转载请声明来源钻瓜专利网。





