[发明专利]一种基于路侧设备的多目标检测和视野转换方法

说明书

本文公开了一种基于路侧设备的多目标检测和视野转换方法，属于无人驾驶车路协同感知领域。路侧设备的多目标检测具体方法为：激光雷达点云和图像数据进行预处理；采用深度学习的方法提取点云和图像特征图；点云特征与图像特征在多通道、多层次、多维度方面信息融合进行目标检测。视野转化方法为：在路侧视角下搜寻每一辆车周围一定范围内的目标检测信息，并将这些信息进行切割提取；然后将提取的视图转化为车端视图，发送给车端进行使用。该种方法能够提高路侧视角下宽领域、多目标、多视角目标检测效果，通过目标检测、视图切割、目标提取、视图转化传输的方式能够解决无人驾驶汽车中存在盲区、计算需求大、传感器数量多的问题。

技术领域

本发明涉及一种基于路侧设备的多目标检测和视野转换方法，属于无人驾驶车路协同感知领域。

背景技术

在自动驾驶发展过程中自动驾驶安全面临巨大挑战，单车智能存在驾驶盲区、中远距离感知不稳定等问题阻碍了自动驾驶的落地，因此在路侧设备下的多目标检测能够很好的解决单车智能存在的问题，进行多车多目标的视野转换可以降低车载端传感器的使用数量，降低车辆的成本。通过路侧设备的目标检测能够很好的促进自动驾驶的发展和产业化的运行。

为了解决上述问题，目前，一般采用在车载端加装大量传感器的方法解决单车智能存在的问题，然而加装大量传感器导致车载端的计算量增大，不能满足实时性要求，也增加了车辆成本，同时受车辆高度的限制，车载端传感器视野不够大，不能很好解决单车智能存在的问题。

有鉴于此，确有必要提出一种基于路侧设备的多目标检测和视野转换方法，以解决上述问题。

发明内容

本发明的目的是在于提供一种基于路侧设备的多目标检测和视野转换方法，能够解决单车智能存在的问题。

为了实现上述目的，本发明提供了一种基于路侧设备的多目标检测和视野转换方法，主要包括一下步骤：

步骤1：激光雷达点云和图像数据进行预处理；

步骤2：深度学习的方法提取点云和图像特征图；

步骤3：点云特征与图像特征在多通道、多层次、多维度方面信息融合进行目标检测；

步骤4：路侧视角下搜寻每一辆车周围一定范围内的目标检测信息，并将这些信息进行切割提取；

步骤5：将提取的视图转化为车端视图，发送给车端进行使用。

可选的，步骤1中激光雷达点云预处理主要是去除掉非地面附近的激光雷达点云，对图像数据处理主要是进行图像的增强操作。

可选的，步骤2中深度学习提取点云特征的骨干网络是以ResNet为基础架构，深度学习提取图像特征的网络是以VIT为基础的架构。

可选的，步骤3中采用注意力机制在多通道、多层次、多维度方面进行信息融合。

可选的，步骤4中路侧视角下搜寻每一辆车周围一定范围内的目标检测信息采用的是沿半径的方式进行搜寻，把搜寻到车辆的id信息进行切割提取。

可选的，步骤5中采用坐标转化的方式进行视图的转换，并以V2X协议的方式发送给车端。

本发明的有益效果是：本发明能够很好的解决单车智能存在驾驶盲区、中远距离感知不稳定以及单车智能中传感器使用数量多，成本高，计算需求大的问题。

附图说明

图1是本发明一种基于路侧设备的多目标检测和视野转换方法流程图。

图2是本发明激光雷达点云和图像数据进行预处理流程图。

图3是本发明点云和图像特征提取流程图

图4是本发明点云和图像特征融合流程图