[发明专利]异常行为检测方法、装置、计算机设备及存储介质

权利要求书

1.一种异常行为检测方法，其特征在于，包括：

获取视频帧图像；

通过人脸检测模型对所述视频帧图像进行人脸识别；通过手部检测模型对所述视频帧图像进行人手识别；

在识别到所述视频帧图像中包含人脸之后，获取人脸图像，将所述人脸图像输入目光朝向模型，得到所述目光朝向模型输出的与所述人脸对应的目光朝向角度；将所述人脸图像输入头部姿态模型，得到所述头部姿态模型输出的与所述人脸对应的头部朝向角度；将所述人脸图像输入人脸关键点模型，得到所述人脸关键点模型输出的与所述人脸对应的人脸关键点信息；在识别到所述视频帧图像中包含人手之后，获取人手图像，将所述人手图像输入手部关键点模型，得到所述目手部关键点模型输出的与所述人手对应的手部关键点信息；

根据所述目光朝向角度、所述头部朝向角度、所述人脸关键点信息和所述手部关键点信息，判断与所述人脸对应的目标人物是否存在异常行为；

若所述目标人物存在异常行为，则根据所述异常行为生成异常行为预警信息。

2.如权利要求1所述的异常行为检测方法，其特征在于，所述根据所述目光朝向角度、所述头部朝向角度、所述人脸关键点信息和所述手部关键点信息，判断与所述人脸对应的目标人物是否存在异常行为，包括：

判断所述目光朝向角度和头部朝向角度是否相同；

若所述目光朝向角度和头部朝向角度不相同，则判定与所述人脸对应的目标人物存在第一异常行为。

3.如权利要求1所述的异常行为检测方法，其特征在于，所述根据所述目光朝向角度、所述头部朝向角度、所述人脸关键点信息和所述手部关键点信息，判断与所述人脸对应的目标人物是否存在异常行为，包括：

获取至少两帧视频帧图像的目光朝向角度；

根据所述至少两帧视频帧图像的目光朝向角度，以及视频帧图像的采集时间，确定所述目标人物的目光方向变化速度；

若所述目光方向变化速度大于预设速度阈值，则判定与所述人脸对应的目标人物存在第二异常行为。

4.如权利要求1所述的异常行为检测方法，其特征在于，所述根据所述目光朝向角度、所述头部朝向角度、所述人脸关键点信息和所述手部关键点信息，判断与所述人脸对应的目标人物是否存在异常行为，包括：

从所述人脸关键点信息提取多个人脸关键点；根据所述手部关键点信息绘制手部覆盖区域；

计算处于所述手部覆盖区域的人脸关键点的个数；

若所述个数大于预设个数阈值，则判定与所述人脸对应的目标人物存在第三异常行为。

5.如权利要求1所述的异常行为检测方法，其特征在于，所述人脸关键点信息包含若干人脸关键点和若干与所述人脸关键点对应的置信度；

所述将所述人脸图像输入人脸关键点模型，得到所述人脸关键点模型输出的与所述人脸对应的人脸关键点信息之后，包括：

根据所述人脸关键点信息计算多个人脸区域的区域置信度；所述多个人脸区域包括额头、眉毛、眼睛、鼻子、脸颊、嘴唇和下巴；

若存在一个区域置信度小于预设置信度阈值，则判定所述人脸存在遮挡情况，并输出包含与小于预设置信度阈值的区域置信度对应的人脸区域的遮挡提示信息。

6.如权利要求1所述的异常行为检测方法，其特征在于，所述通过人脸检测模型对所述视频帧图像进行人脸识别之后，包括：

在检测到所述视频帧图像中未包含人脸之后，输出未检测到人脸的警告信息，并终止对所述视频帧图像进行异常行为检测。