[发明专利]异常行为检测方法、装置、计算机设备及存储介质

说明书

本发明涉及活体检测领域，尤其涉及一种异常行为检测方法、装置、计算机设备及存储介质。其方法包括：获取视频帧图像；通过人脸检测模型识别到人脸之后，将人脸图像输入目光朝向模型，得到目光朝向角度；将人脸图像输入头部姿态模型，得到头部朝向角度；将人脸图像输入人脸关键点模型，得到人脸关键点信息；通过手部检测模型识别到人手之后，获取人手图像，将人手图像输入手部关键点模型，得到手部关键点信息；根据目光朝向角度、头部朝向角度、人脸关键点信息和手部关键点信息，判断目标人物是否存在异常行为；若目标人物存在异常行为，则生成异常行为预警信息。本发明可实时监测到目标人物的异常行为，提高信息获取的及时性和准确性。

技术领域

本发明涉及活体检测领域，尤其涉及一种异常行为检测方法、装置、计算机设备及存储介质。

背景技术

随着互联网的迅速发展，视频会议、视频面审等视频交流方式广泛应用在多个领域中。在进行视频交流时，人们往往容易忽略对方的一些微表情或异常举动，导致错过对方传达的信息，进而导致接收到的信息不准确。

发明内容

基于此，有必要针对上述技术问题，提供一种异常行为检测方法、装置、计算机设备及存储介质，以解决现有技术进行视频交流，不能及时地、准确地获取对方地异常行为的问题。

一种异常行为检测方法，包括：

获取视频帧图像；

通过人脸检测模型对所述视频帧图像进行人脸识别；通过手部检测模型对所述视频帧图像进行人手识别；

在识别到所述视频帧图像中包含人脸之后，获取人脸图像，将所述人脸图像输入目光朝向模型，得到所述目光朝向模型输出的与所述人脸对应的目光朝向角度；将所述人脸图像输入头部姿态模型，得到所述头部姿态模型输出的与所述人脸对应的头部朝向角度；将所述人脸图像输入人脸关键点模型，得到所述人脸关键点模型输出的与所述人脸对应的人脸关键点信息；在识别到所述视频帧图像中包含人手之后，获取人手图像，将所述人手图像输入手部关键点模型，得到所述目手部关键点模型输出的与所述人手对应的手部关键点信息；

一种异常行为检测装置，包括：

视频帧图像获取模块，用于获取视频帧图像；

检测模块，用于通过人脸检测模型对所述视频帧图像进行人脸识别；通过手部检测模型对所述视频帧图像进行人手识别；

信息获取模块，用于在识别到所述视频帧图像中包含人脸之后，获取人脸图像，将所述人脸图像输入目光朝向模型，得到所述目光朝向模型输出的与所述人脸对应的目光朝向角度；将所述人脸图像输入头部姿态模型，得到所述头部姿态模型输出的与所述人脸对应的头部朝向角度；将所述人脸图像输入人脸关键点模型，得到所述人脸关键点模型输出的与所述人脸对应的人脸关键点信息；在识别到所述视频帧图像中包含人手之后，获取人手图像，将所述人手图像输入手部关键点模型，得到所述目手部关键点模型输出的与所述人手对应的手部关键点信息；

判断模块，用于根据所述目光朝向角度、所述头部朝向角度、所述人脸关键点信息和所述手部关键点信息，判断与所述人脸对应的目标人物是否存在异常行为；

异常行为预警模块，用于若所述目标人物存在异常行为，则根据所述异常行为生成异常行为预警信息。

一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令，所述处理器执行所述计算机可读指令时实现上述异常行为检测方法。

一个或多个存储有计算机可读指令的可读存储介质，所述计算机可读指令被一个或多个处理器执行时，使得所述一个或多个处理器执行如上述异常行为检测方法。