[发明专利]基于监控相机和无线定位的行人重识别系统

权利要求书

1.一种基于监控相机和无线定位的行人重识别系统，其特征在于，包括：

定位标注单元，用于对监控区域内的场景进行经纬度标注；

行人视频序列与视觉轨迹提取单元，用于从摄像机拍摄的监控区域内的视频中提取出行人视频序列，并根据视频序列中标注的经纬度，提取相应的视觉轨迹；

无线定位轨迹获取单元，用于记录监控区域内移动终端的运动轨迹，获得对应的无线定位轨迹；

视频特征提取器，用于从行人视频序列中提取出视频特征；

循环亲和度传播单元，用于利用视频特征计算待查询的行人视频序列与数据库中每一行人视频序列之间的视觉亲和度，以及利用待查询的行人视频序列对应的视觉轨迹与每一无线定位轨迹的距离计算对应的轨迹亲和度，并通过融合两种亲和度实现两种亲和度的循环更新；

行人重识别单元，利用最终更新得到的视觉亲和度与轨迹亲和度进行行人重识别；

其中，所述循环亲和度传播单元包括：视觉亲和度更新单元，利用视频特征计算待查询的行人视频序列与数据库中每一行人视频序列之间的视觉亲和度，并利用待查询的行人视频序列的视觉轨迹与无线定位轨迹之间的距离，来更新相应视频序列之间的视觉亲和度；轨迹亲和度更新单元，用于根据待查询的行人视频序列的视觉轨迹与无线定位轨迹之间距离计算轨迹亲和度，并根据待查询的行人视频序列与其他行人视频序列的视觉亲和度，来更新待查询的行人视频序列的视觉轨迹与无线定位轨迹之间距离，进而更新轨迹亲和度；

更新的视觉亲和度的方式包括：计算待查询的行人视频序列V_i的视觉轨迹与M个无线定位轨迹的距离D_i＝D_i,1,…,D_i,M，数据库中行人视频序列V_j的视觉轨迹与M个无线定位轨迹的距离D_j＝D_j,1,…,D_j,M；如果小于更新阈值σ，则将行人视频序列对(V_i,V_j)加入视觉亲和度可更新组Ψ中；其中，[·]_min指求矩阵的最小值，l-1表示第l-1次更新得到的相应数据；借由轨迹距离更新两个行人视频序列的视觉亲和度：

其中，为第l次更新之后得到的视觉亲和度，表示初始时刻计算得到的两个行人视频序列的视觉亲和度；

对于待查询的行人视频序列V_i对应的视觉轨迹与第m个行人的无线定位轨迹之间的距离D_i,m，采用如下方式进行更新：

其中，表示初始时刻计算得到的待查询的行人视频序列V_i对应的视觉轨迹与第m个行人的无线定位轨迹之间的距离，为第l次更新后的距离；Φ_i为与待查询的行人视频序列V_i视觉亲和度最高的前R个行人视频序列，但若这R个视频序列中有与无线轨迹距离为无穷大的，则其会被移除，此情况下表示初始时刻计算得到的行人视频序列V_k对应的视觉轨迹与第m个行人的无线定位轨迹之间的距离，表示第l次更新之后得到行人视频序列V_k与V_i的视觉亲和度；

根据更新得到的得到更新后的轨迹亲和度：

2.根据权利要求1所述的一种基于监控相机和无线定位的行人重识别系统，其特征在于，所述定位标注单元，利用GPS定位仪器监控区域内的场景进行网格定位，从而获得每一视频帧中网格点对应像素的经纬度坐标，再通过近邻差值计算出每个像素点的经纬度，完成经纬度标注；

所述无线定位轨迹获取单元，通过基站定位、GPS定位、或者wifi定位方式记录每一个移动终端的运动轨迹；得到M个基于无线定位的经纬度轨迹其中是第m个行人的无线定位轨迹。

3.根据权利要求1所述的一种基于监控相机和无线定位的行人重识别系统，其特征在于，所述行人视频序列与视觉轨迹提取单元，利用跟踪算法从摄像机拍摄的监控区域内的视频中提取出行人视频序列V；对于一个视频帧中的行人边界框，通过边界框底部中心位置所对应的像素点的经纬度来得到行人在物理世界中的位置，这样，对于一个行人视频序列V，能够得到相应的经纬度轨迹，再经过卡尔曼滤波降低噪声的影响，得到最终的视觉轨迹T^v。