本发明公开了一种基于YOLOv3和FaceNet的多人脸识别方法,包括以下步骤:步骤S1.建立数据库;步骤S2.采集视频并输送视频帧;步骤S3.缩放图片;步骤S4.将图片送入两个并行的轻量化YOLOv3的端到端人脸检测网络并与LBP特征进行特征融合;步骤S5.对得到的两组feature map进行坐标融合;步骤S6.将得到的feature map输入facenet进行编码,生成人脸特征向量;步骤S7.将得到的人脸特征向量与数据库中的人脸特征向量进行对比得到相似度,输出最终结果。本发明采用YOLOv3的主干网络替换成轻量化的网络Mob i l eNetv3进行人脸检测,降低网络复杂度,减少模型参数,提高检测速度。