[发明专利]一种基于实时视频流的跨摄像头全局行人跟踪方法有效

专利信息
申请号: 202011417661.6 申请日: 2020-12-07
公开(公告)号: CN112257684B 公开(公告)日: 2021-04-16
发明(设计)人: 孟启炜;朱世强;寄珊珊;顾建军;李特 申请(专利权)人: 之江实验室
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06T7/246;G06T7/292
代理公司: 杭州求是专利事务所有限公司 33200 代理人: 邱启旺
地址: 310023 浙江省杭州市余*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 实时 视频 摄像头 全局 行人 跟踪 方法
【权利要求书】:

1.一种基于实时视频流的跨摄像头全局行人跟踪方法,其特征在于,包括以下步骤:

步骤一:在室内场景下,目标行人通过多摄像头系统,获取全局目标行人实时监控视频;所述多摄像头系统由第一摄像头、第二摄像头、……、第n摄像头串联组成;

步骤二:对所述第一摄像头中的目标行人使用单摄像头下的Yolov3模型对视频帧图像进行检测,获取视频帧图像中每个行人的检测框;将得到的检测目标视为跟踪目标,使用Deep和Sort算法以其位置和特征为依据进行单摄像头下的持续跟踪,并为每个跟踪目标分配一个ID;

步骤三:对于所述第一摄像头中稳定跟踪的目标行人,将目标行人信息实时更新并存储于Redis中间件,所述第二摄像头不断从Redis中间件中不重复的读取跟踪目标行人信息,并保存于自身缓存中;所述目标行人信息包括行人ID和行人特征;

步骤四:目标行人从所述第一摄像头进入到第二摄像头后,将第二摄像头检测的行人特征与第一摄像头跟踪的行人特征进行匹配,暂定其ID;

步骤五:在第二摄像头中,对于暂定ID的目标行人,继续采用步骤四中的方法为其匹配ID,待其连续10帧匹配同一ID后,确定其ID,将此ID加入禁止列表,禁止其他行人再匹配到该ID;对于ID确定的目标行人通过步骤二中的单摄像头下的跟踪方法进行持续跟踪;但是其显示为库中分配的第一摄像头ID;反之,若在连续10帧中,其分配的ID发生变化,或出现最佳分配无效的情况,则重新进行分配或视其为新人进入,直至连续10帧稳定后ID确定处理;对于匹配同一ID并确定其ID的情况,此时该目标行人将不再参与最佳分配,但是库中该ID相关信息仍存在;对于禁止列表中的ID,每隔30帧进行一次刷新,验证禁止ID对应的目标行人是否仍在视频中,若在视频中,则对此ID继续禁止其他行人再匹配;否则,将此ID从禁止列表中去除;持续跟踪过程中,若出现目标行人重叠情况时,暂将所有重叠的目标行人设为离开状态且不进行跟踪,待重叠结束后,再重新进行跟踪;

步骤六:重复上述步骤三~五,以实现由第一摄像头~第n摄像头跨摄像头全局行人跟踪。

2.如权利要求1所述基于实时视频流的跨摄像头全局行人跟踪方法,其特征在于,步骤三具体包括如下子步骤:

(3.1)对于第一摄像头中检测到的目标行人,待其稳定跟踪100帧后开始记录其特征及对应ID,每隔20帧记录一次并存入Redis中间件中,且同一行人特征记录数上限为20个;

(3.2)第二摄像头在从Redis中间件中只读取之前没有读取到的行人信息,对于之前读取过的行人信息不会重复读取,读取完成后保存在自身缓存中。

3.如权利要求1所述基于实时视频流的跨摄像头全局行人跟踪方法,其特征在于,步骤四具体为:

使用行人检测算法处理第二摄像头实时视频流,获得第二摄像头中所有行人的检测框,再通过特征提取算法获得行人检测框对应的行人特征;使用K相互近邻距离方法计算其与第一摄像头中目标行人特征的距离,使用最优分配算法将第二摄像头中的目标行人与第一摄像头中的目标行人相匹配,若两者间的K相互邻近距离DK小于0.6,则匹配成功,为同一目标行人,以第一摄像头中的行人ID暂定第二摄像头中目标行人的ID;否则,给予第二摄像头中目标行人新的ID;其中,K相互近邻距离DK的计算方法如下:

DK=0.7*DJaccard+0.3*DMahalanobis

DJaccard表示杰卡德距离,DMahalanobis表示马氏距离。

4.如权利要求1所述基于实时视频流的跨摄像头全局行人跟踪方法,其特征在于,步骤五中目标行人重叠的判断依据是:两行人检测框水平间距小于100dpi,且竖直间距小于220dpi。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于之江实验室,未经之江实验室许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011417661.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top