[发明专利]基于深度神经网络的道路车道线检测方法及系统

说明书

本发明提供了一种基于深度神经网络的车道线检测方法及系统，所述方法通过编码网络模块对连续图像进行特征提取得到包含车道线语义特征的特征图序列，然后将特征图序列输入到对应的循环卷积网络模块中，通过循环卷积网络模块对特征图序列进行多层循环卷积和时序特征融合，输出特征融合后的语义特征图，最后通过所述解码网络模块对所述语义特征图进行解码，输出车道线位置的预测图。本发明充分地考虑了驾驶场景的连续性，即时间序列上的关联，可以学习到时间先验的关联信息，从而提高网络的稳定性和预测的准确性，还可以将连续图像中前级图像的特征信息用于后级图像，可以减少网络模型的参数和计算复杂度，节约计算资源。

技术领域

本发明涉及自动驾驶辅助中的车道线检测技术领域，尤其涉及一种基于深度神经网络的道路车道线检测方法及系统。

背景技术

当今社会汽车工业技术与经济水平的飞速发展，使得全世界机动车辆的保有量迅速攀升。汽车的广泛普及给人们的生活带来便利的同时也给人们的生命安全造成了很多问题，如交通拥堵、交通事故、环境污染等。随着车辆交通事故的增多，道路行车安全变得越加重要，汽车的自动驾驶和高级辅助驾驶功能受到了越来越多的关注和研究。在自动驾驶和高级驾驶辅助系统中，基于视觉的车道线检测是自动驾驶和高级驾驶辅助系统中的车道偏移报警系统(LDW)和车道保持系统(LKA)的核心，其主要功能为：可以安全引导自动驾驶车辆行驶到规定的主车道内的正确位置，保障驾驶车辆安全规范行驶。

现有的车道线检测方法主要分为传统图像处理方法和基于深度学习的方法：

(1)基于图像处理的传统方法：早期的车道线检测算法采用经典方法，通过图像预处理、特征提取来提取车道标识。这些特征主要是颜色特征和纹理特征。这些特征通过霍夫变换或卡尔曼滤波器等算法结合，在识别出车道线后采用后处理拟合的方式形成最终的车道线。这些传统的方法具有计算成本低的优点，但它们只能在有限的场景中进行，并且对光照条件、行驶车辆遮挡、道路的磨损状态等非常敏感。因此，当车道线标识出现纹理遮挡或者道路车道标识没有或者因时间久远而褪去时，车道线检测基本上很难通过人工提取特征进行检测，在这些复杂的道路场景情况下，基于图像处理的传统方法很难胜任自动驾驶的车道线检测任务。

(2)基于深度学习的检测方法：随着深度学习的发展，深度学习在图像分类、目标检测和语义分割等计算机视觉任务中表现出了优异的性能，基于神经网络的深度学习方法已成功应用于车道线检测任务中。大多数基于深度学习方法使用卷积神经网络(CNN)提取特征，其主流的方法是基于语义分割，将车道线检测视为一种语义分割任务，其中每个像素被预测为一个类别标签，以表明该像素是否属于图像中的车道标识。这些方法证明了利用CNN可以提取出车道的高级语义特征，可以在一些复杂的道路情况下有效地分割和检测到车道线。通过卷积神经网络等深度学习中的语义分割方法可以扩大感受野，提高对图像中上下文的关联特征信息的提取，这样对于车道线标识出现纹理遮挡或者道路车道标识没有或者因时间久远而褪去时也可以检测出车道线。对于车道线检测方法实际应用来说，算法模型偏向于可在对计算资源有限的嵌入式等设备上运行，且保证模型在速度与精度上更好的平衡。检测方法需要减少网络模型的参数和计算复杂度，以便可以大规模部署到自动驾驶车辆上高效实时运行。而且，由于现有的方法并没有考虑到驾驶道路场景的连续性，即在时间上连续的图像帧具有相关联的先验特性。然而现有的深度学习方法没有考虑到这种时间的先验信息。

针对上述情况。需要一种考虑到驾驶道路场景在时间上连续的图像帧具有相关联的先验特性的车道线检测方法。

发明内容

本发明提供了一种基于深度神经网络的道路车道线检测方法及系统，用以解决车道线检测方法需要减少网络模型的参数和计算复杂度，且考虑驾驶道路场景在时间上连续的图像帧具有相关联的先验特性的技术问题。

为解决上述技术问题，第一方面，本发明提出了一种基于深度神经网络的道路车道线检测方法，包括以下步骤：

获取待识别图像及其前后的N张的连续图像，依时序构成一组连续图像序列；