本发明提供了一种基于视频的机动车不礼让行人检测方法。通过基于统计的原理对复杂的道路行驶环境建立背景模型,检测出前景点,连接成团块;利用已有行人样本的纹理特征建立行人模型,利用DPM行人模型检测出有效的行人包围盒;利用车辆的LBP特征,用SVM进行训练,得到车辆检测结果包围盒;利用神经网络ANN进一步筛选判断筛除误检得到高置信度车辆与行人,送入DSST(Discriminative Scale Space Tracker)跟踪器进行跟踪,输出行人轨迹,与车辆轨迹进行比较判断,若车辆自当行人行进方向并且人车间距小于单车道距离则进行违法抓拍。该方法识别率高,有较好的鲁棒性。