[发明专利]一种基于FPGA的四目运动目标检测与识别设备及方法

权利要求书

1.一种基于FPGA的四目运动目标检测与识别的设备，其特征在于：包括声学设备、红外激光探测设备、探测识别组件，所述声学设备和红外激光探测设备分别与探测识别组件相接，所述探测识别组件由依次相接的图像采集模块、图像预处理模块、目标识别模块和识别结果发送模块组成，所述图像采集模块采用四个摄像头同步对信息进行采集，图像预处理模块使用FPGA的PL部分完成，目标识别模块使用FPGA的PS部分完成，识别结果发送模块采用WIFI传输，将最终结果上传至上位机进行显示查看；

所述摄像头采用的是星光级sensor；

基于上述设备的检测与识别方法，包括以下步骤：

步骤一、采用图像采集模块中的4个摄像头进行360度全方位成像，利用声学设备或红外激光探测设备探测到有运动目标时，4个sensor同时对数据进行采集：经过光电转换后，将原始数据raw图传入图像预处理模块中FPGA的PL模块；通过图像信号处理单元对raw图进行自动曝光处理，并将采集到的raw图像存储至DDR中；通过FPGA的核间通讯完成四目的图像采集控制，核0作为主控核，通过共享ARM来控制核1的启动和关闭，每个ARM核独立完成双目的图像采集；

步骤二、将raw图传入目标识别模块中的运动目标IP核，进行帧差、二值化、滤波的处理；

步骤三、对二值化的图像使用TWO-PASS方法进行连通域的查找，查找出运动目标，然后在raw图上进行运动目标的抠图，将只含运动目标的raw图送入加载卷积神经网络预训练的模型中对其进行识别；

步骤四、若FPGA的主核0先完成识别，则等待从核1，若从核完成之后，直接将标志置为完成状态，主核收到之后，将双核的识别结果进行图像压缩，然后通过WIFI传输至上位机进行查看。