[发明专利]一种极低码率的安防场景监控视频编解码方法及系统在审
申请号: | 202310920194.6 | 申请日: | 2023-07-26 |
公开(公告)号: | CN116634178A | 公开(公告)日: | 2023-08-22 |
发明(设计)人: | 程宝平;陶晓明;黄炎;谢小燕;田心阳;王梨名;刘素云 | 申请(专利权)人: | 清华大学;中移(杭州)信息技术有限公司 |
主分类号: | H04N19/70 | 分类号: | H04N19/70;H04N19/146;G06T9/00;G06N3/0475;G06N3/094 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 苟冬梅 |
地址: | 100084*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 极低码率 场景 监控 视频 解码 方法 系统 | ||
1.一种极低码率的安防场景监控视频编码方法,其特征在于,应用于发送端,所述方法包括:
获取安防场景监控视频中的第一非关键帧;
对所述第一非关键帧进行前背景分离,得到第一目标物体所对应的第一前景图,所述第一目标物体为所述第一非关键帧所包含的目标物体;
对所述第一前景图进行语义信息提取,得到所述第一目标物体所对应的第一语义信息;
将所述第一语义信息编码传输至接收端,以使所述接收端根据所述第一语义信息、以及所述安防场景监控视频的关键帧的背景图,重建所述第一非关键帧。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述安防场景监控视频的关键帧;
对所述关键帧进行前背景分离,得到所述关键帧的背景图、以及第二目标物体所对应的第二前景图,所述第二目标物体为所述关键帧所包含的目标物体;
对所述第二前景图进行语义信息提取,得到所述第二目标物体所对应的第二语义信息;
将所述第二语义信息和所述关键帧的背景图编码传输至所述接收端,以使所述接收端根据所述第二语义信息和所述关键帧的背景图,重建所述关键帧。
3.根据权利要求1所述的方法,其特征在于,所述第一语义信息包含所述第一目标物体中各个目标物体各自对应的素描图、以及所述第一目标物体中各个目标物体各自对应的属性信息;
将所述第一语义信息编码传输至接收端,包括:
将各个所述素描图和各个所述属性信息编码传输至所述接收端。
4.根据权利要求3所述的方法,其特征在于,每个所述素描图通过以下步骤编码传输至所述接收端:
基于连续帧的运动估计,确定所述素描图所关联的素描图变换矩阵和第一残差,所述第一残差为:所述素描图与所述素描图所关联的预测素描图之间的残差;
将所述素描图变换矩阵和所述第一残差编码传输至所述接收端,以使所述接收端根据所述第一残差、所述素描图变换矩阵、以及所述素描图所关联的上一帧素描图,重建所述素描图。
5.根据权利要求1-4任一所述的方法,其特征在于,所述方法还包括:
在外部条件发生显著变化的情况下,更新所述安防场景监控视频的关键帧。
6.根据权利要求5所述的方法,其特征在于,在外部条件发生显著变化的情况下,更新所述安防场景监控视频的关键帧,包括:
在所述安防场景监控视频中存在亮度变化值大于设定阈值的目标非关键帧的情况下,将所述目标非关键帧确定为所述安防场景监控视频的新的关键帧。
7.根据权利要求1-4任一所述的方法,其特征在于,所述方法还包括:
不针对所述安防场景监控视频中未包含目标物体的非关键帧进行编码传输,以使所述发送端根据所述关键帧的背景图,直接重建所述未包含目标物体的非关键帧。
8.一种极低码率的安防场景监控视频解码方法,其特征在于,应用于接收端,所述方法包括:
解码发送端传输的第一编码数据,得到第一目标物体所对应的第一语义信息,所述第一目标物体为安防场景监控视频中的第一非关键帧所包含的目标物体,所述第一语义信息是所述发送端对所述第一非关键帧的前景图进行语义信息提取而得到的;
根据所述第一语义信息,通过重建模型重建用于表征所述第一目标物体的第一目标图像;
将所述安防场景监控视频的关键帧的背景图和所述第一目标图像进行前背景融合,得到所述第一非关键帧所对应的重建视频帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学;中移(杭州)信息技术有限公司,未经清华大学;中移(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310920194.6/1.html,转载请声明来源钻瓜专利网。