[发明专利]包含人与宠物互动内容的电子相册制作方法、装置及设备

权利要求书

1.一种包含人与宠物互动内容的电子相册制作方法，其特征在于，所述方法包括：

S1：获取婴幼儿看护场景下实时的视频流，将所述视频流分解为多帧图像；

S2：利用预设的目标检测模型对各帧图像进行检测，依据检测结果，提取多帧包括婴幼儿和宠物的第一目标图像；

S3：依据预设的互动评分规则，对各所述第一目标图像中婴幼儿与宠物的互动情况进行评分，并依据评分结果，提取出各帧高质量图像生成电子相册。

2.根据权利要求1所述的包含人与宠物互动内容的电子相册制作方法，其特征在于，所述S3包括：

S31：将各所述第一目标图像输入预设的基于自监督学习的单目深度估计模型中，对婴幼儿与宠物之间是否互动进行判断；

S32：提取出判断结果为婴幼儿与宠物之间发生互动的第二目标图像，利用所述互动评分规则，对各所述第二目标图像中的宠物特征、婴幼儿特征和图像质量特征分别进行评分；

S33：将各帧评分高于预设阈值的图像提取出来，记作高质量图像，并对所述高质量图像进行预设调整，生成电子相册。

3.根据权利要求2所述的包含人与宠物互动内容的电子相册制作方法，其特征在于，所述S31包括：

S311：利用预设的目标位置检测模型，对各所述第一目标图像进行检测，识别出各所述第一目标图像中的婴幼儿位置信息和宠物位置信息；

S312：依据所述婴幼儿位置信息和宠物位置信息，得出婴幼儿最小外接矩形框的第一中心点位置信息和宠物最小外接矩形框的第二中心点位置信息；

S313：将所述第一中心点位置信息和第二中心点位置信息输入基于Monodepth结构的深度估计模型中，得出婴幼儿与宠物之间的相对位置信息；

S314：依据所述相对位置信息，对婴幼儿与宠物之间是否发生互动进行判断。

4.根据权利要求3所述的包含人与宠物互动内容的电子相册制作方法，其特征在于，所述S313包括：

S3141：若依据所述相对位置信息，判断所述第一中心点与第二中心点之间距离小于预设阈值，则认为婴幼儿与宠物之间发生了互动；

S3142：若依据所述相对位置信息，判断所述第一中心点与第二中心点之间距离不小于预设阈值，则认为婴幼儿与宠物之间未发生互动。

5.根据权利要求4所述的包含人与宠物互动内容的电子相册制作方法，其特征在于，所述S32包括：

S321：将各所述第二目标图像输入预设的宠物动作检测模型中，提取出第二目标图像中的宠物肢体关键点信息，并统计所述宠物肢体关键点数量；

S322：依据所述宠物肢体关键点信息和关键点数量，对各所述第二目标图像中的宠物特征进行评分，输出第一分数；

S323：将各所述第二目标图像进一步输入预设的人脸检测模型中，提取出第二目标图像中的婴幼儿脸部关键点信息；

S324：依据所述婴幼儿脸部关键点信息，对婴幼儿脸部的遮挡情况和婴幼儿的表情进行判断，并依据判断结果，对各所述第二目标图像中的婴幼儿特征进行评分，输出第二分数；

S325：对各所述第二目标图像的清晰度和光线强度进行评分，输出第三分数。

6.根据权利要求5所述的包含人与宠物互动内容的电子相册制作方法，其特征在于，所述S33包括：

S331：获取预设的评分权重；

S332：依据所述评分权重，对所述第一分数、第二分数和第三分数进行加权处理，并求和得出总分数；

S333：依据所述总分数，提取总分数高于预设阈值的图像作为高质量图像；

S334：对所述高质量图像进行预设调整，生成电子相册。