[发明专利]视频处理方法、装置、电子设备及存储介质在审
申请号: | 202111465240.5 | 申请日: | 2021-12-03 |
公开(公告)号: | CN114157895A | 公开(公告)日: | 2022-03-08 |
发明(设计)人: | 丁予康;戴宇荣;徐宁;周雅 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | H04N21/43 | 分类号: | H04N21/43;H04N21/44 |
代理公司: | 北京铭硕知识产权代理有限公司 11286 | 代理人: | 朱志玲;曾世骁 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 电子设备 存储 介质 | ||
1.一种视频处理方法,包括:
获取第一视频的视频帧组,其中,所述视频帧组被分为参考帧和非参考帧;
获取所述深度神经网络模型针对参考帧的特征输出结果;
基于所述深度神经网络模型针对参考帧的特征输出结果,获取所述深度神经网络模型针对非参考帧的特征输出结果;
基于所述深度神经网络模型针对参考帧和非参考帧的特征输出结果获得第二视频,其中,第二视频的分辨率大于第一视频的分辨率。
2.如权利要求1所述的视频处理方法,其中,所述基于所述深度神经网络模型针对参考帧的特征输出结果,获取所述深度神经网络模型针对非参考帧的特征输出结果,包括:
通过以下方式来获取所述深度神经网络模型针对非参考帧的特征输出结果:确定非参考帧与参考帧相比的特征变化区域和非特征变化区域,获取深度神经网络模型针对所述特征变化区域的第一特征输出结果,基于针对参考帧的特征输出结果获得所述深度网络模型针对所述非特征变化区域的第二特征输出结果,并基于第一特征输出结果和第二特征输出结果获得所述深度神经网络模型针对非参考帧的特征输出结果。
3.如权利要求2所述的视频处理方法,其中,
所述获取所述深度神经网络模型针对参考帧的特征输出结果,包括:获取参考帧在所述深度神经网络模型中的每一层网络的特征输出结果,其中,所述深度神经网络模型包括n层网络,其中,n是大于1的正整数;
所述通过以下方式来获取所述深度神经网络模型针对非参考帧的特征输出结果,包括:确定非参考帧与参考帧相比在所述深度神经网络模型的第i-1层网络的特征变化区域和非特征变化区域,在第i层网络中仅对特征变化区域执行卷积操作来获得第i层网络针对特征变化区域的第一特征输出结果,基于参考帧在第i层网络的特征输出结果来获得第i层网络针对非特征变化区域的第二特征输出结果,并且基于第一特征输出结果和第二特征输出结果获取非参考帧在第i层网络的特征输出结果,其中,2≤i≤n;
所述基于所述深度神经网络模型针对参考帧和非参考帧的特征输出结果获得第二视频,包括:基于参考帧和非参考帧在所述深度神经网络模型的第n层网络的特征输出结果获得第二视频。
4.如权利要求1所述的视频处理方法,其中,所述获取视频帧组,包括:
获取第一视频,对第一视频进行解码得到至少一个视频帧组,并将每个视频帧组中的视频帧划分为参考帧和非参考帧。
5.如权利要求3所述的视频处理方法,其中,所述确定非参考帧与参考帧相比在所述深度神经网络模型的第i-1层网络的特征变化区域和非特征变化区域,包括:
根据非参考帧在第i-1层网络的特征输出结果与参考帧在第i-1层网络的特征输出结果,确定所述特征变化区域和所述非特征变化区域。
6.如权利要求5所述的视频处理方法,其中,所述根据非参考帧在第i-1层网络的特征输出结果与参考帧在第i-1层网络的特征输出结果,确定所述特征变化区域和所述非特征变化区域,包括:
计算非参考帧在第i-1层网络的特征输出结果与参考帧在第i-1层网络的特征输出结果之间的特征差;
基于所述特征差获得单通道的二进制特征;
根据获得的二进制特征确定特征变化区域和非特征变化区域。
7.如权利要求6所述的视频处理方法,
其中,所述在第i层网络中仅对特征变化区域执行卷积操作来获得第i层网络针对特征变化区域的第一特征输出结果,包括:在第i层网络中利用所述二进制特征对所述特征差执行稀疏卷积来获得第i层网络针对所述特征差的特征输出结果,并且基于所述二进制特征和针对所述特征差的特征输出结果获得第一特征输出结果;
其中,所述基于参考帧在第i层网络的特征输出结果来获得第i层网络针对非特征变化区域的第二特征输出结果,包括:基于所述二进制特征和参考帧在第i层网络的特征输出结果来获得第二特征输出结果;
其中,所述基于第一特征输出结果和第二特征输出结果获取非参考帧在第i层网络的特征输出结果,包括:通过将第一特征输出结果和第二特征输出结果相加来获得非参考帧在第i层网络的特征输出结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111465240.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种低碳污水处理系统
- 下一篇:一种融合了主题信息的多意图识别方法和系统