[发明专利]基于数据共享的多智能体协同跟踪方法、装置及存储介质有效

专利信息
申请号: 202110411910.9 申请日: 2021-04-16
公开(公告)号: CN113223060B 公开(公告)日: 2022-04-15
发明(设计)人: 朱鹏飞;尚元元;胡清华 申请(专利权)人: 天津大学
主分类号: G06T7/292 分类号: G06T7/292;G06K9/62;G06V10/75
代理公司: 天津市北洋有限责任专利代理事务所 12201 代理人: 李林娟
地址: 300072*** 国省代码: 天津;12
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 数据 共享 智能 体协 跟踪 方法 装置 存储 介质
【权利要求书】:

1.一种基于数据共享的多智能体协同跟踪方法,其特征在于,所述方法包括:

通过无人机拍摄获取数据,将采集到的数据进行格式调整和目标标注处理,获取MDMT数据集;

基于所述MDMT数据集,使用Tracktor单机多目标追踪算法进行单个无人机视频的多目标追踪,通过其他摄像头的信息进行跨摄像头目标关联,对出现在不同无人机视野范围内的相同目标进行编号的统一;

其中,所述跨摄像头目标关联具体为:

对每台无人机的视频序列分别进行处理,得到对应的回归结果R1t,R2t和目标框D1t,D2t;

使用跨摄像头特征匹配对第一台无人机的目标框D1t和第二台无人机已有的跟踪框R2t进行匹配;

如果匹配成功,则目标框则从D1t中删除,对匹配成功的目标框中的跟踪目标赋予匹配的编号,加入跟踪框R1t中,否则直接进入下一步;

使用跨摄像头特征匹配对第二台无人机的目标框D2t和第一台无人机已有的跟踪框R1t进行匹配;

如果匹配成功,则目标框则从D2t中删除,对匹配成功的目标框中的跟踪目标赋予匹配的编号,加入跟踪框R2t中,否则直接进入下一步;

使用跨摄像头特征匹配对第二台无人机的目标框D1t和第一台无人机的目标框D2t进行匹配;

如果匹配成功,则两台无人机的目标框赋予相同的编号,分别加入跟踪框R1t和R2t,否则直接进入下一步;

将剩余的目标框赋予新的编号,分别加入跟踪框R1t和R2t,作为本帧的各台无人机的跟踪结果。

2.根据权利要求1所述的一种基于数据共享的多智能体协同跟踪方法,其特征在于,所述MDMT数据集包括:

不同角度拍摄的的双无人机数据集,包括:若干种类和若干属性标签的视频序列;

所述双无人机数据集包含两个无人机对同一场景同时进行不同角度的拍摄画面,两个无人机拍到的目标有重叠,但画面并不完全相同。

3.根据权利要求1所述的一种基于数据共享的多智能体协同跟踪方法,其特征在于,通过所述跨摄像头特征匹配使得不同摄像头之间相同目标的距离变小,不同摄像头之间不同目标的距离变大。

4.一种基于数据共享的多智能体协同跟踪装置,其特征在于,所述装置包括:

获取模块,用于通过无人机拍摄获取数据,将采集到的数据进行格式调整和目标标注处理,获取MDMT数据集;

跟踪模块,用于基于所述MDMT数据集,使用Tracktor单机多目标追踪算法进行单个无人机视频的多目标追踪;

跨摄像头目标关联模块,用于通过其他摄像头的信息进行跨摄像头目标关联,对出现在不同无人机视野范围内的相同目标进行编号的统一;

其中,所述跨摄像头目标关联模块包括:

第一匹配子模块,用于使用跨摄像头特征匹配对第一台无人机的目标框D1t和第二台无人机已有的跟踪框R2t进行匹配;

第一判断子模块,用于如果匹配成功,则目标框则从D1t中删除,对匹配成功的目标框中的跟踪目标赋予匹配的编号,加入跟踪框R1t中,否则直接进入下一步;

第二匹配子模块,用于使用跨摄像头特征匹配对第二台无人机的目标框D2t和第一台无人机已有的跟踪框R1t进行匹配;

第二判断子模块,用于如果匹配成功,则目标框则从D2t中删除,对匹配成功的目标框中的跟踪目标赋予匹配的编号,加入跟踪框R2t中,否则直接进入下一步;

第三匹配子模块,用于使用跨摄像头特征匹配对第二台无人机的目标框D1t和第一台无人机的目标框D2t进行匹配;

第三判断子模块,用于如果匹配成功,则两台无人机的目标框赋予相同的编号,分别加入跟踪框R1t和R2t,否则直接进入下一步;

输出子模块,用于将剩余的目标框赋予新的编号,分别加入跟踪框R1t和R2t,作为本帧的各台无人机的跟踪结果。

5.一种基于数据共享的多智能体协同跟踪装置,其特征在于,所述装置包括:处理器和存储器,所述存储器中存储有程序指令,所述处理器调用存储器中存储的程序指令以使装置执行权利要求1-3中的任一项所述的方法步骤。

6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令被处理器执行时使所述处理器执行权利要求1-3中的任一项所述的方法步骤。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津大学,未经天津大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110411910.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top