[发明专利]基于社交关系识别的智慧社区管理方法、装置、电子设备

权利要求书

1.一种基于社交关系识别的智慧社区管理方法，其特征在于，包括以下步骤：

获取图像序列，所述图像序列包括至少一个在社区活动的目标人员；

通过训练好的第一网络模型提取每帧图像中所述目标人员的社区社交关系特征，并将所有图像对应的社区社交关系特征依次输入到训练好的第二网络模型进行序列融合，得到目标融合特征；

获取所述目标人员的社区时空特征，将所述融合特征和所述社区时空特征输入到训练好的第三网络模型进行社交关系的识别，得到目标人员的社区社交关系；

基于所述目标人员的社区社交关系对所述目标人员在社区的权限进行配置。

2.如权利要求1所述的方法，其特征在于，所述目标人员包括第一目标人员和第二目标人员，所述通过训练好的第一网络模型提取每帧图像中所述目标人员的社区社交关系特征，包括：

将每帧图像输入到目标检测网络中，通过所述目标检测网络输出所述每帧图像对应的所述第一目标人员的第一人体框、所述第二目标人员的第二人体框以及所述第一目标人员和所述第二目标人员的人体联合框；

基于所述第一人体框、所述第二人体框和所述人体联合框，通过所述训练好的第一网络模型从每帧图像中提取所述第一目标人员和第二目标人员的社交关系特征。

3.如权利要求2所述的方法，其特征在于，所述第一网络模型包括第一提取网络、第二提取网络和第三提取网络，所述基于所述第一人体框、所述第二人体框和所述人体联合框，通过所述训练好的第一网络模型从每帧图像中提取所述第一目标人员和第二目标人员的社交关系特征，包括：

根据所述人体联合框从每帧图像中获取对应的人体联合图像；

通过所述第一提取网络从所述人体联合图像中提取出图层特征和第三人体特征；

通过所述第二提取网络从所述图层特征中获取所述第一人体框的第一人体特征和所述第二人体框的第二人体特征；

基于所述第一人体特征、所述第二人体特征和所述第三人体特征，通过所述第三提取网络得到所述第一目标人员和第二目标人员的社交关系特征。

4.如权利要求3所述的方法，其特征在于，所述基于所述第一人体特征、所述第二人体特征和所述第三人体特征，通过所述第三提取网络得到所述第一目标人员和第二目标人员的社交关系特征，包括：

将所述第一人体特征、所述第二人体特征和所述第三人体特征进行特征拼接，得到拼接特征；

通过所述第三提取网络从所述拼接特征中获取所述第一目标人员和第二目标人员的社交关系特征。

5.如权利要求4所述的方法，其特征在于，所述第二网络模型包括特征融合网络，所述将所有图像对应的社区社交关系特征依次输入到训练好的第二网络模型进行序列融合，得到目标融合特征，包括：

获取所有图像对应的社区社交关系特征；

将所述所有图像的社区社交关系特征依次输入到所述特征融合网络进行特征融合，得到目标融合特征。

6.如权利要求5所述的方法，其特征在于，所述将所有图像的社区社交关系特征依次输入到所述特征融合网络进行特征融合，得到目标融合特征，包括：

基于当前图像的社区社交关系特征获取当前图像的当前融合特征；

将所述当前融合特征和下一图像的社区社交关系特征输入所述特征融合网络进行特征融合，得到下一融合特征；

重复上述步骤，直到所述图像序列的最后一帧图像，得到所述目标融合特征。

7.如权利要求6所述的方法，其特征在于，所述社区时空特征包括所述第一目标人员和所述第二目标人员在社区内不同时间段以及不同地点同行的特征。