[发明专利]违规丢弃垃圾行为检测方法、装置及应用

说明书

本申请提出了一种违规丢弃垃圾行为检测方法、装置及应用，包括步骤：获取连续多帧监控视频图像；获取同时存在至少一垃圾检测框和至少一人体检测框的所述监控视频图像得到第一待检测图像集合；获取所述第一待检测图像集合的任一第一待检测图像，获取所述第一待检测图像的每一所述垃圾检测框的垃圾特征图以及每一所述人体检测框的人体特征图；获取所述第一待检测图像中每一所述垃圾特征图与每一所述人体特征图的交互特征；对所述交互特征进行分类获得分类结果，基于所述分类结果确定违规丢弃垃圾行为，本方案可提高违规丢弃垃圾行为的检测准确度，同时可在复杂的检测环境中更加关注垃圾和乱丢垃圾人员，减少检测算法的检测压力。

技术领域

本申请涉及行为监测领域，特别是涉及违规丢弃垃圾行为检测方法、装置及应用。

背景技术

城镇环境综合整治是一项依靠各城市管理部门的分工配合，运用各种技术手段，组织和监督各单位和市民共同努力以达到防护治环境污染的管理工程。在城镇环境综合整治工程中，违规丢弃垃圾行为是一种亟待被整治的不文明行为。违规丢弃垃圾行为的结果是导致各类生活垃圾被无序地堆放在公共场所，而这样的行为将引发各类社会问题：示例性的，暴露在空气中的垃圾若未能被及时清理的话，将导致蚊蝇滋生，进而传染疾病并危害人类健康；丢弃到水源内的的垃圾会导致海生动物死亡，进而会影响饮用水的卫生；另外，任意堆放的垃圾还会带来极大的安全隐患，这些垃圾遇到明火容易引起火灾。

目前监管违规丢弃垃圾行为的措施分为人工监管和视频监管两类，人工监管的方式指的是专职城管人员定时地进行特定场所的巡查，这种方式存在耗时耗力，覆盖面小，时效性差的问题；视频监管指的是借助计算机视觉技术实时地对监管场所进行监管，以自动监管违规丢弃垃圾行为，然而由于乱丢垃圾的场景存在事件和背景都较为复杂的问题，导致目前的视频监管方法无法很好很精准地实现违规丢弃垃圾行为的检测。具体的，目前的违规丢弃垃圾行为检测模型采用的方式大多还是直接利用乱丢垃圾的行为特征检测乱丢垃圾的行为，但由于监控场景的背景中往往存在多个人以及多个物体，多个人和多个物体之间存在各类行为模式，目前的违规丢弃垃圾行为检测模型需要遍历所有的背景因素并一一进行行为判断后才能得出检测结果，导致模型的计算压力巨大；且，目前的违规丢弃垃圾行为检测模型判断乱丢垃圾的行为特征更多是关注垃圾和人员之间的相对位置，这种方式难以区分违规丢弃垃圾行为和正常行为之间的行为特征，导致违规丢弃垃圾行为检测模型的检测结果难以满足实际城管需求。

发明内容

本申请实施例提供了一种违规丢弃垃圾行为检测方法、装置及应用，本方案结合乱丢垃圾人员和垃圾之间的交互关系进行违规丢弃垃圾行为的检测，可提高违规丢弃垃圾行为的检测准确度，同时可在复杂的检测环境中更加关注垃圾和乱丢垃圾人员，减少检测算法的检测压力。

第一方面，本申请实施例提供了一种违规丢弃垃圾行为检测方法，所述方法包括：获取连续多帧监控视频图像；获取连续多帧监控视频图像；获取同时存在至少一垃圾检测框和至少一人体检测框的所述监控视频图像得到第一待检测图像集合；获取所述第一待检测图像集合中任一第一待检测图像，获取所述第一待检测图像的每一所述垃圾检测框的垃圾特征图以及每一所述人体检测框的人体特征图；获取所述第一待检测图像中每一所述垃圾特征图与每一所述人体特征图的交互特征；对所述交互特征进行分类获得分类结果，基于所述分类结果确定违规丢弃垃圾行为。

第二方面，本申请实施例提供了一种违规丢弃垃圾行为检测装置，包括：监控视频图像获取单元，用于获取连续多帧监控视频图像；第一待检测图像获取单元，用于获取同时存在至少一垃圾检测框和至少一人体检测框的所述监控视频图像得到第一待检测图像集合；特征图获取单元，用于获取所述第一待检测图像集合中任一第一待检测图像，并获取所述第一待检测图像的每一所述垃圾检测框的垃圾特征图以及每一所述人体检测框的人体特征图；交互特征获取单元，用于获取所述第一待检测图像中每一所述垃圾特征图与每一所述人体特征图的交互特征；行为判断单元，用于对所述交互特征进行分类获得分类结果，基于所述分类结果确定违规丢弃垃圾行为。