[发明专利]打架行为识别方法、装置及电子设备

权利要求书

1.一种打架行为识别方法，其特征在于，包括：

获取监控视频流的图像帧；

将所述图像帧输入行人检测模型进行检测，得到行人检测结果；

将所述行人检测结果裁剪到固定尺寸，进行归一化后，得到图像特征；

将所述图像特征输入人体关键点检测模型进行检测，得到多个人体关键点，并通过人体关键点检测模型的分类分支得到打架类别概率P1；

根据所述人体关键点的分布情况，计算关键点逻辑得分；

将所述行人检测结果按时间顺序堆叠成固定长度特征，输入时序分类模型进行检测，得到打架类别概率P2；

根据所述关键点逻辑得分、打架类别概率P1以及打架类别概率P2，计算打架得分；

根据所述打架得分进行打架行为报警。

2.如权利要求1所述的打架行为识别方法，其特征在于，将所述图像帧输入行人检测模型进行检测，得到行人检测结果，包括：

将所述图像帧输入行人检测模型中，得到每一个行人的检测框和对应的整个画面特征向量；

根据所述行人检测框，计算出检测框的中心点。

3.如权利要求1所述的打架行为识别方法，其特征在于，将所述图像特征输入人体关键点检测模型进行检测，得到多个人体关键点，并通过人体关键点检测模型的分类分支得到打架类别概率P1，包括：

将所述图像特征输入人体关键点检测模型进行检测，得到多个人体关键点；

根据所述图像特征以及人体关键点，利用人体关键点检测模型的分类分支来区分人体是否为打架姿态，得到打架类别概率P1。

4.如权利要求3所述的打架行为识别方法，其特征在于，将所述图像特征输入人体关键点检测模型进行检测，得到多个人体关键点之后，所述方法还包括：

将打架行为识别中非必要的人体关键点去除。

5.如权利要求1所述的打架行为识别方法，其特征在于，根据所述人体关键点的分布情况，计算关键点逻辑得分，包括：

根据所述人体关键点的分布情况，计算左右手上臂与前臂之间的夹角θ1、左右手上臂与身体之间的夹角θ2，以及左右大腿之间的夹角θ3；

根据下式计算关键点逻辑得分：

f(x)=1/180×θ1＋1/90×θ2＋1/180×θ3；

式中，f(x)为关键点逻辑得分；θ1为左右手上臂与前臂之间的夹角，θ1为0°~180°；θ2为左右手上臂与身体之间的夹角，θ2为0°~180°；θ3为左右大腿之间的夹角θ3为0°~180°。

6.如权利要求5所述的打架行为识别方法，其特征在于，根据所述关键点逻辑得分、打架类别概率P1以及打架类别概率P2，计算打架得分，包括：

根据h(x)=p1×f(x)＋p2计算打架得分；

式中，h(x)为打架得分，P1为人体关键点检测模型得到的打架类别概率，P2为时序分类模型得到的打架类别概率。

7.如权利要求1所述的打架行为识别方法，其特征在于，根据所述打架得分进行打架行为报警，包括：

判断所述打架得分是否大于或等于预设阈值；

如果所述打架得分小于预设阈值，判定为不存在打架行为，继续对图像帧进行打架行为识别；

如果所述打架得分大于或等于预设阈值，判定为存在打架行为；

产生告警并返回当前帧图片。

8.如权利要求7所述的打架行为识别方法，其特征在于，如果所述打架得分大于或等于预设阈值，判定为存在打架行为之后，所述方法还包括：

判断打架行为持续时间是否满足时间要求T1；

如果打架行为持续时间满足时间要求T1，对打架累计值加1；

判断所述打架累计值是否大于或等于设定阈值；

如果所述打架累计值大于或等于设定阈值，产生告警并返回当前帧图片；

如果所述打架累计值小于设定阈值，继续对图像帧进行打架行为识别。