[发明专利]基于人工智能算法的多人行为识别方法及装置

说明书

本申请公开了一种基于人工智能算法的多人行为识别方法及装置。包括：接收待处理图像信息后，检测其中每个人对应连续N帧画面中的位置坐标；基于每个人对应连续N帧画面中的位置坐标所对应图像计算每个人的特征图；基于每个人对应的特征提取每个人对应的候选时序；根据候选时序从候选时序对应个人的特征图中提取候选时序对应的特征图；根据候选时序对应的特征图确定候选时序对应人的行为，以及根据候选时序对应的特征图和候选时序对应人的连续N帧画面中的位置坐标确定行为发生位置坐标，以及根据候选时序确定候选时序对应人的行为发生时间。本申请能够解决无法对同时出现的多个人行为进行识别，并且无法确定出行为发生时间，从而不能确定出人的精确行为的问题。

技术领域

本申请涉及计算机技术领域，尤其涉及一种行为确定的方法及装置。

背景技术

随着计算机技术的发展，通过计算机确定人体行为已经得到广泛的应用，例如，可以应用在智能视频监控，病人监护系统，智能家居等场景中，所以如何通过计算机准确确定人的行为成为研究的热门。行为确定的方式通常为从一段视频或者图像序列中自动识别出其中人体进行的行为，目前可以基于动态骨骼的动作识别方法实现。该方法通过将图卷积网络扩展到时空图模型，设计用于行为识别的骨骼序列通用表示，对视频或图像序列进行姿态估计，并在骨骼序列上构建时空图，然后对其应用多层时空图卷积等操作处理，来实现对行为的确定。

但是，上述方法只能对包括单个人的视频或者图像序列中的行为进行确定，无法对其中同时出现多个人的视频或者图像序列中的行为进行识别，并且也无法确定出行为发生时间，从而不能确定出人的准确行为。

发明内容

本申请提供了一种基于人工智能算法的多人行为识别方法及装置，能够解决现有技术无法对同时出现多个人的视频或者图像序列中进行行为识别，并且无法确定出行为发生时间，从而不能准确确定出人的行为的问题。

第一方面，本申请提供了一种行为确定的方法，包括：

接收待处理图像信息，所述待处理图像信息包括视频和连续图像；

检测所述待处理视频中每个人对应连续N帧画面中的位置坐标；

基于所述每个人对应连续N帧画面中的位置坐标所对应图像计算所述每个人的特征图，所述特征图为所述特征图所对应人在时间维度和空间维度能够区分其他人的图像，其中N为正整数，N取值为不小于计算一次所述每个人的特征图所需图像的数量；

基于所述每个人对应的特征提取所述每个人对应的候选时序；

根据所述候选时序从所述候选时序对应个人的特征图中提取所述候选时序对应的特征图；

根据所述候选时序对应的特征图确定所述候选时序对应人的行为，以及根据所述候选时序对应的特征图和所述候选时序对应人的连续N帧画面中的位置坐标确定所述行为发生位置坐标，以及根据所述候选时序确定所述候选时序对应人的行为发生时间。

本申请实施例中，可以对待处理图像信息中的所有人进行检测，并同时对每个人的行为进行识别，不仅可以确定出每个人的行为，还可以确定出每个人行为的发生时间，从而可以实现对每个人行为的准确确定。

结合第一方面，在第一方面的第一种可能的实施方式中，所述检测所述待处理图像信息中每个人对应连续N帧画面中的位置坐标，包括：

检测所述待处理图像信息所包括每帧图像中所有人的位置坐标；

将所述每帧图像中所有人中的同一个人进行关联，得出所述待处理图像信息中每个人对应连续N帧画面中的位置坐标。

结合第一方面或第一方面的第一种可能的实施方式，在第一方面的第二种可能的实施方式中，所述基于所述每个人对应的特征提取所述每个人对应的候选时序，包括：