[发明专利]一种融合光流信息和Siamese框架的目标跟踪方法及装置

摘要

本发明提供一种融合光流信息和Siamese框架的目标跟踪方法及装置所述方法包括：获取当前第N帧及当前帧的前面的三帧的光流信息，再获取当前帧，当前帧为第N帧，其中N3，再对当前帧的前面的三帧进行处理后，得到变形后的特征图，将变形后的特征图及当前帧特征图，作为检测帧输入时序打分模型，得到各特征图即光流整合帧的特征的权重，并将所述各特征图的权重与所述特征图进行运算得到最终的检测帧。根据本发明的方案，基于整合了光流信息的特征图并结合Siamese框架进行目标跟踪，计算精度高、速度快，可以跟踪背景复杂以及剧烈运动的对象。

主权项

1.一种融合光流信息和Siamese框架的目标跟踪方法，其特征在于，所述方法包括：/nS101：获取当前帧，当前帧为第N帧，其中N>3，再获取当前帧的前面的三帧，分别是第N-3帧、第N-2帧、第N-1帧，所述第N-3帧、第N-2帧、第N-1帧分别和当前第N帧使用TVNet光流网络来计算光流，得到Flow1、Flow2、Flow3；并对Flow1、Flow2及Flow3进行裁剪(Crop)操作，得到22×22的光流矢量图P1、P2、P3；将当前帧输入特征网络，得到22×22的当前帧特征图F